【超解像】Lada part6

前スレ
【超解像】Lada part5
https://egg.5ch.io/test/read.cgi/software/1782703217/

■　URL
Lada
https://github.com/ladaapp/lada/releases

Jasna
https://github.com/Kruk2/jasna/releases

Lada-EX
https://codeberg.org/comman/lada-ex

検出モデル　v2_accurate
https://huggingface.co/zelefans/vrmr/tree/main　の
lada_vr_mosaic_detection_model_v2_accurate.pt

除去モデル　basicvsrpp-generic_v1.2_full
https://huggingface.co/ladaapp/lada/tree/main　の
lada_mosaic_restoration_model_generic_v1.2_full.pth

■　不具合があった場合に試してみる事

・GPUスケジューリング　オフ
スタートメニュー＞設定＞システム＞ディスプレイ＞グラフィックの設定
ハードウェア アクセラレータによるGPUスケジューリング＞オフ

・最新グラフィックスドライバに更新

>>408
>>360
高品質設定の方が良いかというと、ケースバイケースな印象
やるなら短い区間で確認した方が良いです

>>409
アドバイスありがとうございます。比較してもぱっと見分からなかったので
とりあえず標準（高速）で破壊します。それに最高品質（遅い）は、RTX-5060TI（8VRAM）だととんでもなく時間かかる･･･

4070Tiでfhd 29.97fps 約2時間の動画がyolo4、LTXモデル標準で10h46mと出てる…これならなんとか待てるがrfdetr-v6だともっとかかるのか

アニメは時間短いからLTXでも我慢できるが
普通のAVの尺はちょっと厳しすぎるな、洗練されるの待つほうが精神的に良さそう

>>411
yolo4、rfdetr-v6で処理時間違うんですか？

標準でuncenと区別つかないぐらいクッキリだと感じたから最高品質は試してないな

VRAM16GB以下はオフロード発生するから無理だって
VRAM足りなくなったら10倍遅いシステムメモリで処理するからクソ遅くなる

5070でLTXを標準で試してるとこだけどGPUはずーっと100%、VRAMも62%占有
LTX破解中は他のことはちょっとできないレベル
専用機を用意しておいてよかっただけど毎日このレベルで回していたら結構早く寿命がくるかな
リリースが夏場でなくてよかったよ

世界中の人が使ってるLTXだから速くなるのかなあ？
今までみたいにプレイヤーが少なすぎて最適化の余地があった領域ではなくなった訳よ

yoro-v2をｖ0.11のモデルフォルダに入れたらそのまま認識してくれたね
コンパイル済みなら再コンパイルは不要だった

俺はローカルAIで慣れているからいいけど
色々工夫して少しは処理時間が改善するかもね

グラボポチッた。セールのせいか到着は週明けだけど

もうこの掲示板、テクニカルすぎてエロの要素が皆無

>>413
破壊処理にここまで時間がかかると、モザイク検出工程(ステップ1/4)の時間差なんて誤差レベルになってしまうのでは?

すけべ目的のエロガッパは他を当たりな
このスレは技術的探究心を満たすための紳士たちの社交場だからね

>>416
専用機にするならLinuxかな。
メインメモリへのフォールバックはしないけど、16GBで大丈夫かな？

>>422
rfdetr-v6だと14hとなっているからそんなことなさそう

rfdetrは遅いし検出甘いからずっと>>1のyolo使ってるわ

modi forkもv0.11.1の上にリベースした

>>362
LTXの復元が低解像度だとモザイク部分がちょっとボケることがある件、ポストプロセスになるけど
モザイク部分だけSwiftVRで2倍に描き直す方法思いついてうまく行ったんで機能追加した(--ltx-crop-vsr)
公式リリースでLTX復元した動画と元動画を渡すだけでモザイク以外はそのまま
swiftvr-distill(軽い)かswiftvr(中身はswiftvr-inlineのscale 2固定)を選べる
※フォーク単体ではLTXは動かない、CLIのみ、Windowsはこれから確認

>>427
あとから出来ないなら先に済ませておけばいいじゃない、という事か
発想が柔軟で流石ね
win版待ってます

v0.11.1は起動しないから試したくても試せない

>>425
ほんとですねFHD 3時間物を途中まで試してみたら
yolo : 27h
rfdetr : 66h と出た

>>430
完走してみないと初期のETAでは判りませんね。
yolo 27hというのはモザが無い部分ベースのETAだったのかな。結局今は66hになった

このスレの人たちはみんなjasnaに15ドル（25ドル）払ってんの？

前にUNetがどんなもんかの興味本位で奢ったよ
LTXは質いいわ
ものにもよるだろうけど破壊後のぼやぼやが結構解消されてる
5070tiで高速モード使って30分の動画が3h45mなのはキツイが

>>432
1回の飲み代より安いしな

v0.11.1は、basicvsr++の方エラーになって動かない、課金しないと駄目？

コヒーくらいおごれない人はLadaやってればいいんじゃないの
俺等はJasnaで楽しくやっていくから

>>435
既存のBasicVSR++は課金しなくても動くよ
エラーメッセージが無いのであれだが、エンジンファイルはv0.10.0のを使いまわしてる？
それともエンジンコンパイルがうまく行かない？

>>436
コヒーだってよwwwww

処理に時間かかる以外は前Verまで全然だめだったやつもいけるのが良いな、Unetの時に気になって課金して良かった。

5080のファンが2500rpmで回り始めたのでクーラーつけたわ

VR対応してくれないかな。

PL制限しなよ

8KVRが3倍ぐらいの時間でできるようになるまで様子見だな

>>437 返事ありがとう、最初のチェックはOKなんだけど。モデルウエイトはv0.10.0をコピーした。ログ見たらpytorch2.6の事が書いてあるっぽい。

>>444 一回だけ時間かかるけどエンジンファイル消してコンパイルし直してみるのが良い気がする

>>428
Windwos版も確認できた (今回ビルドガイドも見直してます)

--ltx-crop-vsrは順番的には「先に済ませる」じゃなくて「後から仕上げる」やつです
LTXのソースはupstreamで公開済みだけど、重みは暗号化されていて公式リリースでしか復号できないので、modi版ではLTX復元そのものはできない
なので、公式リリースでLTX復元 → その出力と元動画をmodiに渡す → modiが元動画からLTXと同じ切り出し枠を再現し、
LTX出力のその部分だけSwiftVRで描き直して戻す、という作戦です
LTXは切り出した枠を 512pxに揃えて描いて元のサイズに戻すので、素材によっては細部が甘くなる、これはそこを補う後処理
後処理なのでデコードとエンコードが1回ずつ増えて、モザイク外も再エンコードになるのがイマイチ（LTX側もmodi側も低CQ推奨）
ただ、現状思いつく手はこれ

>>445 前バージョンのモデルウエイト、コピーしないでやってもコンパイルの表示は出るものの、すぐにエラーになる。オマ環なのか？前バージョンまでは動いてたんやが。

インタレス解除はtvmw8の常時2倍fps化(高精度)が速くて良いな
>>235
真樹さくらと長谷川ゆいが好き

>>446
なるほど承知
この復元力だと、モザイクに多少影響出るような(これまででは不適正だった)適当なアップスケールでも復元しちゃう気もしてきた
こちらは自分でもできるやつだからあとでやってみよう

モザイクに影響でるアップスケールだと復元どーのより検知漏れひどくなるぞ

これはもう、亀の甲羅を外したゴクウだな
ジャンプしたらやべぇことになるやつ
JAVさんの修行は長かっただけに感慨深い！

（DBネタ通じる前提でよかったよな？

博士のJAVPの頃からAi使った破壊が行われたらすごい事になると思っていたらそれが現実化
すごい時代になったもんです

>>451
絶対に50超えたジジイだよこれ

ここ平均年齢高めだから
一桁や10台はまずいない

RTX3070でLTX破壊始めてみたけどステップ2/4:準備中 になってから殆ど進まない
フリーズしてないみたいだけど殆どGPU100%になっててもファンは勢いよく回らないけど
こんなに時間が掛かるもんなの？

LYXの標準•高速で短編やってみたけとすげーなこれ

おっと失敗
元からleaked版じゃね？くらいの仕上がり
ウネウネとかもなく安定した映像になってるし解像度も高い
ただ元動画の5倍の時間がかかるのだけはなんとかしてほしいところ

>>455
>>415

DGX Sparkあれば24時間体制で破解出来そうだな

「--restoration-model-name ltx-undistilled」は課金しないといけないと思うのですが、当方VRはせず2D専門なんですけれども、basicvsrppと比べてどうでしょうか？
「--secondary-restoration」が使えないようですし。

>>458
既に論じられてた事だったのね
失礼
LTXを満足に使いたければメモリー16GBクラスのグラボ買い換えろって事か

>>460
>>457
ltxもltx-undistilledも課金要のモデルね
ltxでも重いが、ltx-distilledはそれよりさらに重いモデル
最近の1080p素材だったら二次復元はいらない位の出来と思う
昔の480pや720p素材については二次復元があったほうがいい場面もある
必要だったんで自力でなんとかしたｗ

5060ti8Gで9分半の動画に5時間半かかったよ
CPUは5700XにRAM32G
出来上がりはチラチラがかなり減ってて凄いから
お気に入りのシーン切り出して何個かやろうかなて気になる
VRAM16Gのボードはこのマシンと同じくらいの値段になるからしばらくお預けかな

コーヒー奢るのって25ドル選択してメールアドレス入れるでいい？

【Jasna v0.11.1】LTX 復元の処理時間の事前見積もり方法(RTX 5080での実測に基づく)

1. 処理時間の構成
処理時間は「ウィンドウ数 × 1 ウィンドウあたりの単価」でほぼ決まる
480p〜1080p では入力解像度は単価に影響しない、LTX は検出領域を 512 px に切り出してから処理するためである
4K では合成段で元解像度のフレームを扱うため、1 ウィンドウあたり約 2 秒増える（出力 1 フレームあたり約 28 ms）

2. ウィンドウ数の確認方法
ウィンドウ数は、`--log-level info` を指定して実行した際にログへ出力される `LTX plan: … windows` 行で確認できる
（GUI の場合はログ表示欄で確認できる）
この行は scan（全体の 1〜5 %）の終了時点で出力されるため、ここで中断すれば本処理の前に把握できる
フレーム数からの推定は避けるべきである。カットの多い素材ではウィンドウ数が大きく増え、
30 フレームに 1 回の割合でカットがあるアニメ素材では、フレームあたりのコストが通常素材の 3.7 倍となった

(つづき)
3. 単価の内訳と目安
単価は「VAE encode ＋ denoise ステップ数 × 1 ステップの時間 ＋ VAE decode および合成」の和である
512 px における値は以下のとおり（scan を除く、RTX5080の場合）
- ltx --ltx-fast：約 8.3 秒（8 ステップ × 0.65 秒、2 時間の素材で実測）
- ltx int8：約 10.5 秒（8 × 0.92 秒、推定値）
- ltx-undistilled --ltx-fast：約 16 秒（15 × 0.85 秒、推定値）
- ltx-undistilled int8：約 21 秒（15 × 1.21 秒、推定値）
large-canvas（768 px）は 512 px の 2.1〜2.5 倍である
scan を含めた目安は、ltx --ltx-fast で「ウィンドウ数 × 約 9 秒」となる
2 時間の実写素材では、実時間の 2.5〜3.2 倍を要した

4. 実行中の残り時間
実行開始後は、ログの残り時間表示（`run … left`）の精度が高い
5 時間の実行に対する誤差は +0.5 % であった
各モデルの初回実行時のみ、speed test のため 1〜3 分が加算される

5. 注意事項
上記の数値は RTX5080(VRAM 16 GB)環境での実測に基づく
VRAM の少ない Windows 環境で共有 GPU メモリへの退避が発生すると、処理速度が低下し、
かつ実行中に変動するため、本方法による見積もりは精度が下がる
その場合は当該環境で単価を実測すること

>>455
とりあえず12ギガの3080tiは使える

>>467
12ギガだと処理時間は元動画時間と比べてどれぐらい？

なんだこれ、起動しねーじゃねーか

VRAM不足で妥協してやるにしてもメインメモリが代わりに必要になるから
メインメモリ32GBは必須だな

>>470
自分はメインメモリー32GB積んでるけど3070だとSD画質で30分程度試したけど予想作業時間60hって出たから止めた
別なSD画質の1分程度の物を試して2時間ぐらい掛かったから30分の動画が作業時間60hって予想は結構正確なんだろうなと思える
SD画質でこんなに時間掛かるんだから今のバージョンのままだとVRAM容量が満たされない状態で使うのはかなり辛い

破壊もこだわるならVRAM16GB要る時代か
AI時代って感じだな
最低でも5060ti16gb

4070(12GB)、RAM32GBだが10分の1080p動画が2時間半くらいでやれてるわ
厳選編集してるので破解すべきシーンしかない動画だが

タスクマネージャーのパフォーマンス画面をAIに「この状況を説明して」と投げれば説明してくれる。
グラフ表示のどれか一つはcudaを選択しといた方が良い
https://i.imgur.com/qyuU0wp.jpeg

>>472
今までのVSR++なら4Kでも3時間位で終わったから寝る前や仕事に出掛ける前に2～3本まとめて破壊させとけば良いやと思えたけど
さすがに30分程度の動画で予想作業時間60hって出ちゃうとね・・・ｗ
試しにやった1分程度の動画見ても今までとは明らかに鮮明度違うしこれ見ちゃうと後戻り出来ないなぁｗ

ローカルLLMみたいに複数のGPUに対応してくれたら簡単にVRAM盛れるんだけどな
できるならもうやってるだろうから、やっぱ難しいんかね

グラボ16GB、メインメモリ80GB積んでるけどLTX使わないなら無用だな

starlightで挫折してLTXでも挫折しないといけないのか
16GBのグラボ欲しい～

ボヤケが無いのとモザの境界線が分からないレベルなのも凄いなLTX

LTXモデルタイムアウトばっかりでダウンロードできない

models.mdに自分でHFからダウンロードする方法書いてある

>>473

自分も4070(12G)だけど、そんなもんだね。

1本丸ごと処理するには荷が重い。

5060Ti(16G)で5000以上対応の高速モードだと半分ぐらいの時間で処理できたりしないのかな。
5707Ti(16G)は、流石に手が出ない。高すぎ。

2028年からnand暴騰が解消されていくみたいだから
5xxxが手頃な値段になるのは4年後の2030年くらいかもしれんね

>>482

RTX50用の高速モードでも試して欲しい。

ファイル名は、
ltx-restore-alpha1-distill8-nvfp4.safetensors.enc
1.4倍高速らしい。

買えるのが先か、枯れるのが先か

AI投資でHBMが大量に作られるようになったからPC向けもそっちに行くだろうな
今のDDRもGDDRも

コーヒー奢って何時間でキー来るんやろう？2時間経っても来ない

4070(12GB)、RAM32GB
7分の非魚眼4KVRをVRモードオフで4K2D動画としてやってみたら4時間20分かかった
抜粋してやる価値はあるわ

LTX試してたらPCがクラッシュして以降電源入っても画面真っ暗
VGAが壊れたのかと色々試してたらまさかのDisplayPortケーブルの故障だったんだがそんなことある？

4070Sだけど思ったよりは時間かからない感じだった
どっかで10から20倍って見たけど、2時間物が大体6倍から8倍位で終わる

>>482
報告まとめてくれてサンクス
5080で2時間の実写をそれなりに本数通した者として、補足を2点

1. 「1 分動画の時間 × 120」は悲観的過ぎ
LTXは1回の実行ごとに準備時間が数10秒かかるので短い動画ほどこの固定費の割合が大きくなる
実際、5080+高速モードONで2時間の実写を変換したときは2.5〜3.2倍（約5〜6.5 時間）で、表の 14.6 時間の半分以下だった
また、処理時間は動画の長さよりモザイクの量とシーンカットの数で決まるので、同じ2時間でも素材によって変わる

なお、モデルの初回だけは速度測定に1〜3 分かかるので、測定するなら2回目以降が良い

2. カードごとの設定問題
5080で比べると、設定だけでこれくらい変わる
・高速モードON(NVFP4)(--ltx-fast）：1.0 倍
・高速モードOFF(int8)：約 1.3 倍 (こっちがデフォルト設定)
・Best (非蒸留版、undistilled）：約 2〜2.5 倍 (デフォルトは蒸留版のStandard)
・大きなモザイクをシャープにする(large-canvas)：さらに 2〜2.5 倍 (デフォルトはOFF)

公平に比べるなら全部デフォルト設定で測るべきだけど、自分含め50系の人は高速モードをONにして使っている人が多いはずなので
表の差はカードの性能差だけではなくなってると思う

>>380
ほらね。ほとんどのユーザーは5080クラス以上でないと実用的ではないと言っている。今、いくらよ、このクラスのグラボ。仕上がりの素晴らしさは認めるが、スペックのハードルを下げていく開発・進化の方も目指してほしいし、それに対するコーヒーは幾らでも奢ってあげるよ。

生成の方に舵切ったからある程度のスペックは必要だよね…
アニメが綺麗にできるなら25ドル払って試してみたい

>>488
今日午前中に奢ったけど、10～20分くらいでメールにライセンスコード送られてきたよ

>>464
だいぶ前でうろ覚えだけど
支払いするとメールの宛先教えて、って画面になるはず
だからあのメッセージボードみたいのには個人情報みたいのは記入しなくていいよ

Windows11 26H2
Ryzen7 5700X 32GB
RTX5060 8GB
でJasna11.1が起動すらできないのですが10.0は普通に動きます
グラフィックスドライバーを一個前に戻してみたりとか設定ファイルを一度消してみたりとかぐらいは試しましたがダメでした
ライセンスキーは入手済みですがそれ以前の問題で止まってしまいました
何か確認すべきところがあったら教えていただけると助かります

2080ti11GBメモリ32GB
30秒のいつも使ってるテスト動画で2時間17分w
実用するには分めっちゃ早漏にならなあかんやん

>>493
5080以上でないと「実用」的ではない？
>>498
「実用」の定義ありがとう

>>497
githubのissueやdiscord見てるとv0.11.1と相性の悪いソフトがあるっぽいね
コマンドプロンプトかPowerShellでv0.11.1を展開したフォルダにcdしてから
.\jasna --help
って打つとどうなる？

ATOK使ってると起動時にエラーダイアログ出るな
OK押したらそのまま起動できるけど

ソースによるけどVRAM12Gあって低速モードでなら
時間が20倍もかかるとこはないんでない？VRソースで実行した場合は知らぬが
他のアプリケーションやブラウザでVRAM喰って閾値(VRAMへのモデル常駐分のかな？)を下回ると
自動でメインメモリに回して動作しようとする→速度が劇的に遅くなるからそこだけ気を付けてれば
>>494
アニメは試した範囲だとbasicVSRとは比較にならないくらい線がめっちゃくっきりブレずに綺麗に出る
よくある汁物表現とゴチャる事も激減してたね
特に学習してるという話は聞かなかったんで正直驚いた
検出はモデル10に入ってたv2VRをこっちのフォルダにコピーして(あれば検出してくれる)閾値を下げると良い感じ、何故か11には入ってなかった

4070ti-12GB RAM-32GB FHD-1h50m ltx-fast
この条件で9h40mかかった
掛けた甲斐があるものが出来たw

Fanzaの人気順で最初に出てくる伊藤さんの1:58のFHDサンプル動画を5090で標準、高速モードonでやってみたけどモザイク少な目だからか4m25sで完走だったわ

>>505 つづき


ここで旧バージョンで破壊した結果よりも今回のBasicVSR++の結果がイマイチなことに気付き、>>1の mosaic_restoration_model 適用をやってみようと思ったら、
リンク先には既に該当ファイルが存在せず、昔落としておいた差し替えファイルを0.11.1に移植してみたら、エラーが出て動かんくなった( ´Д`)

0.11.1のLTXはひとまず画期的な結果を提示してくれたことに大きな価値があると思う一方、とにかくマシンパワーが要るのが確か、マシンパワーさえあれば別世界
一方で中古の5080でも25万くらい出さなきゃ手に入らない現状で、そんな投資できん場合はBasicVSR++に甘んじなきゃならない、その場合は旧バージョンに>>1のパッチ(既に行方不明だが)を当てつつLTXの時短情報を待つのが現実的かと

ウチの4080superでも120分の破壊を朝スタートして夕方に出来上がる感じのリズム、ノンストップで寝てる間もRUNさせると電気代がエグいことになるし、どうしてもクッキリしたいオキニのタイトルの肝心な部分だけ切り出してLTX破壊するとかが現実的なような
5090なんて130万もするものを買うくらいならクラウドで5090だのN200だのを走らせる方が現実的な気がするけど、そこまでするか？っていう気も( ´Д`)
てかクロードさんによると5090なら4080superの1/3くらいの時間で処理できるかもよってことなんだが、ホンマかいな？( ´Д`)

誰か書いてたアイディアだけど
LTXで処理した動画をBasicVSR(もしくは同程度に軽い何らかのモデル)に学習させまくってミドル級なモデルを仕上げる
ってのが現状ベターなのかも

>>500
何も起こらずプロンプトが改行されるだけです