【超解像】Lada part6

前スレ
【超解像】Lada part5
https://egg.5ch.io/test/read.cgi/software/1782703217/

■　URL
Lada
https://github.com/ladaapp/lada/releases

Jasna
https://github.com/Kruk2/jasna/releases

Lada-EX
https://codeberg.org/comman/lada-ex

検出モデル　v2_accurate
https://huggingface.co/zelefans/vrmr/tree/main　の
lada_vr_mosaic_detection_model_v2_accurate.pt

除去モデル　basicvsrpp-generic_v1.2_full
https://huggingface.co/ladaapp/lada/tree/main　の
lada_mosaic_restoration_model_generic_v1.2_full.pth

■　不具合があった場合に試してみる事

・GPUスケジューリング　オフ
スタートメニュー＞設定＞システム＞ディスプレイ＞グラフィックの設定
ハードウェア アクセラレータによるGPUスケジューリング＞オフ

・最新グラフィックスドライバに更新

>>667
My account>Paymentsの金額($25)の右の３点をクリックでadd(edit) message

>>668
うわー！ありがとうございます！！！
早速送ります！

>>647
そうだったのか…。教えてくれて ありがとう

0.11.2の「重なりを減らす」
長い動画で約13% 速くなります。オフにすると、重なりの多い従来のモードになります。
これどういう意味？

>>657
私もファイルによってはLTXの2段階目にいけず止まってしまいます。大丈夫な動画もあるし、何が違うんだろう？

>>672
ログにエラー出てないの？

>>673
エラーというか、1段階目の99%で固まってしまい2段階目に移行しないんですよね。

BasicVSR++の時は別な動画でも同じ解像度なら破壊時間もほとんど一緒だったけどLTXだとかなりバラツキがあるね
10時間ぐらいで終わるものもあれば１日以上掛かるものあったりして
まだ破壊の最適化が出来ていないんだと思う

>>671
とりゃえず直感で答えてみると、
BasicBSR++も含めた高解像化AIが粗い画像から高精細画像を推定するに当たって、
画像の平面軸に加え時間軸のデータも加えて3次元の繋がりをチェックして
かけ離れた破綻が無いようにするための演算が"overlap"ではと。
"overlap"によって急激なマ○コの変形だのの破綻が起きづらくなることが期待できる一方、
演算回数が増えるのでGPUの負荷が増え、処理時間が長くなる。
そこを割り切って3次元演算を切り飛ばして時短を図るのが"Less overlap"ボタンではと。

要するに、
短時間のサンプルで試して、Less overlap -ON でも問題ないと思えるんならそれでOK、
ってことっすな。

>>634
流れからして、buy me a coffee を別垢にしない限り別ライセンスにはならんのではと。
あくまでオゴリだから金額は任意、同一人物がナンボオゴってもオゴったやつは一人なわけで。

破壊処理の最中はマシンがオモオモで何もできんてカキコしとる人の読んで、

んなことあるかいな、と思ってたらウチのもおもむろにそうなって、
みんなどうなん？て聞いてみようと思ったら、今なんでも無いｗ
なんか、Step 2/4 の時にそうなるみたい。今 3/4 で、なんとも無い。
仕事と並行して使ってると慌てるわｗ

>>676
説明ありがとう
要は時間軸を考慮したチェックをするかどうか、という事かな
やり直しは大変なので設定は慎重になるね

>>657
>>672
v0.11.2の不具合っぽいv0.11.3で対策予定
・長い動画でステップ1が止まったように見えるのを修正（64000フレームで35秒→3.5秒）
詳しくは
>>608

>>675
LTXの処理時間は処理するモザイクの量によるので、同じ長さの動画でも処理時間が変わってくする
ステップ1のスキャンでシーン数、カット数、ウインドウ数を計算しているので、その結果を見るとおおよその時間がわかる
詳しくは
>>465
>>466

>>676
>>679
Less overlapの説明はv0.11.3で「モザイクが4秒以上続く場面で約13%速い」に修正される
モザイクが4秒(30fps動画で120フレーム)以上続く場合に重なりを減らして(less overlap)
処理するウインドウ数を減らす(=処理時間が短くなる)指定みたい
定性的な説明はなんとなく合っている気がするｗ

>>682
過去バージョンの設定値から推定したたけだがclip size120フレoverlap20フレがデフォルトのところoverlap5フレに落とすのが高速設定だと思う
20-5=15で大体120の13%になる

4080superにて
ホントに処理時間の差がすごいね
前回132分のをLTX Bestで23時間、今回146分同じくBestで終了予定36時間て( ﾟДﾟ)

これはもうシーンの区切りで元動画をブツ切りにして分割破壊せんとモチベが上がらん
シーンまたいでオカズにすることはまず無いのでｗ
Less overlapのON-OFFも事前にテストピースで確認して決めるべきやね
とにかく破壊対象と破壊条件を厳選しないと　JAVPの頃よか厳しいわｗ

モチベ上がらんでも室温はがっつり上がっとるｗ

0.11.3マダー？バグのせいで捗らん

ぶつ切りにしたLTX動画を繋ぎ合わせて華麗に編集して、世界に一つだけのセクシービデオを作るという気持ちが湧いてきた

動画まるまる放り込んで、朝になったら破解終わってるってのは過去の話になるのか。

0.11.1で有効化していましたが、0.11.2を入れると「Jasnaを有効化」が表示され、それを押すとマシンキーは空白で下に赤字で「Jasna machine identify is unavailable or unsafe」と出ます
当然、マシンキー空白のままライセンスコードを入力して「オンラインで有効化」を押しても有効化されません
前バージョンの0.11.1のフォルダからjasna.exeを実行した時は「有効」になっているし、マシンキーも正常に表示されます
解凍からやり直しても同じだし、いったいどうなっているんでしょう？

君たち紳士には1本丸々破壊完了するまでおあずけは全然無理だろw
jasnaもlada-exもtaviも以下のコマンドで指定秒に細かく分割した動画を全部放り込んで全部の完了待たずとも完了したものから順に観てる。
全部変換終わったら再結合して1本に戻す。

60秒分割の例
ffmpeg -i input.mp4 -c copy -map -f segment_time 60 -reset_timestanps 1 output-%3d.mp4

仕組みが理解できてないんだけど、少なくとも現状から大幅な速度アップみたいな進化は今後もありえないっていうことでいいんだろうか

ESET でLTXエラーする人います？

>>689
ありがとう！これはすごく便利。
でもヘタにええとこでブツ切りになったやつ見て「ああっ( ´Д`)」ってなる寸止めリスクもあるなｗ

4060の8G、RAM16GでSD74分の処理始めたけど50時間かかるらしい、とりあえず完走まで放置するけど
bob化したDVDソースなら倍かかるわけでおれ環じゃ無理あるなこりゃ

アップデートしようと思ったけどエラー報告多いな
公式も認めてるみたいだし
次出るまで待つか

>>690
空間圧縮とか量子化とかステップ削減とか既に色々とこねくり回されてるから
5倍10倍速くなるとかはltx使う限りは無理じゃないかな

Windows版もクラウドGPU使えるようになったりしないかな

LTXってのを使わなければ8Gでもいける？
LTX使わなくても少し良くなって速くなるならいいんだけどなあ

うちRTX3050の8GBで頑張ってるよー

LTXを使わなきゃ1.0と変わんないだと導入する意味ないし
超遅いでもそんな画質よくなるなら試してみるかなあ。
あ、でもLTX使うにはコーヒー代が必要？

そうじゃ

5060ti16gb 5070ti 5080のいずれか買って高速モードがベストなんだろうね
5060ti16gb高速モードだと13gb、4080だと14gb食ってた

新しいモデル出すたびにコーヒー代取られそう

まぁ趣味だろうけど仕事量的には取っても良いと思うけどな、開発機器(GPU等)にも使ってそうだし

>>691
ESTの事はドキュメントに書いてある

ESET をお使いの場合: LTX が起動せず、メッセージに ebehmonl.dll または ebehmoni.dll が出るときは、ESET のディープビヘイビアインスペクション （Deep Behavioral Inspection）の除外に Jasna フォルダーを追加してください。 新しい Jasna を別のフォルダーに入れたら、もう一度追加します。

中華サイトのltxとvsppと流出の比較おもしろいな
やっぱり微妙に違うんだな

>>702
Ladaの無料がおかしかっただけで　用途考えたら1万出してもお釣りが十分来るわな

>>692
スマホで書き込んだのでスペルミスがあった。すまぬ。
正　-reset_timestamps
誤　-reset_timestanps

>>688
0.11.2のバグ
イシュー#532に同じ問題報告複数上がってる

>>707
ありがとう。ハマるところだったｗ

毎日たくさんの破解動画上げてる中華とかのサイトはどんなPCで何台体制なんだろうな

Jasnaの作者はモデルの作り方をちっともわかってない、俺はもっといいモデルを作った
ってイキってた人今ごろ何してるのかなあ

そもそも日本国内で活動する時点で無理があるんよ

0.11.2で検出モデル：rfdetr-v6-largeが選択できないのですが、使うことは出来ないのでしょうか？

largeは別途ダウンロードせないかん

>>714
回答いただきありがとうございます。
どこからダウンロードするのでしょうか？

中華の破壊動画程度なら1本15分程度で終わるだろうからそれ程でもなさそう
LTX動画が流れ出したらどうなるんだろな

models.md に書いてある

俺もそうだが、中華の破壊動画なんてぶっちゃけどうでもいいのだよ
大半は自らの手でどこまで自然に破壊できるかが目的みたいなもんだし・・・

>>717
何度もすいません、models.mdを読んだんですが、ダウンロード先が分からないです・・・

>>719
諦めよう、君の知能ではもう無理だ

>>720
見つかりました。お騒がせしてすみませんでした。

これまでよりだいぶ手間暇かかるLTX破壊を中華がやるかね？

寧ろ機材に金かけられる中華業者の方がやりやすいだろ
正規品売れなくなってガウスモザイクにでも変えられたら困るのでひっそりやってほしい

中華の破壊作品を見ましたが、かなり鮮明でした。
あれは設定で高画質（遅い）、高速モードOFFにしているだけですかね？

>>724
聞いてばかりはやめて1つずつ試してみるといい

まず、カリビアンとかが潰れんじゃね？w

早くLTXがVRにも使えるようになって欲しいわ

おぉ11.3メッチャ早くなってるじゃん

これがあるからやめられんな
とりあえず5060ti16gb買って改善待ちながらやるのがコスパいいでしょ
やれる事は値段倍以上の5080と同じだからな

まあタイムイズマネーよ

0.11.3きたね。残り20時間だったジョブをキャンセルしたわ

5060ti、新モデル+Fastmodeで
3.5倍時間くらいになったのかな
まだ途中だけど

それだとv0.11.2の5080と同じくらいのスピードになるな

731だけどキャンセルした3時間FHD動画を標準画質高速モードで再実行して、ついさっきステップ1が終了してETAが9:40と出てた。この通りならほぼ倍速？
ちな5060Ti16G

ただGpu-zのグラフ見てるとusageが落ち込んでる所があるから、もっと高速化が期待できるのかも？

>>608
Jasna 0.11.3が出たのでちょっと調べた、前に書いた0.11.3予定の修正は全部入ってて、目玉はLTXの高速化
リリースノートとコミットから主なものだけ
■LTX
・蒸留モデルが2つ増えて4段階に、新既定の「標準画質」（2ステップ）が最速、良好画質は約1.5倍、高画質（旧既定）は約2.5倍、最高画質（旧「高画質」）は約5倍遅い
・VAEのエンコード/デコードが速くなった（RTX 5090でステップ4が1ウインドウ1.17秒→0.73秒）。ステップ4は次のウインドウのデコードと書き出しを並行処理
・作者の計測（RTX 5090、40秒の1080p）：0.11.2の既定186秒 → 高画質106秒（1.75倍）、標準68秒（2.7倍）
・RTX 50xxは標準・良好にもFast mode（NVFP4）あり
・30fpsを60fps化した素材でシーンカットを誤検出してウインドウが増えてたのを修正
■入力
・VC-1（WMV系）のフレーム落ちと音ズレ、UTF-8でないタグで開けない、CPUデコード中の停止や区間カットでフリーズするのを修正
■GUI
・停止ボタンは確認してから止まる、処理中にウィンドウを閉じると「最小化して続ける」が選べる
・進捗バーが途中で戻らなくなった
■Linux
・ZFS対応、配布サイズが7.5GB→5.6GBに
■更新するとき
・初回はLTXモデルごとにGPU向けの準備が入るので遅い
・LTXモデルは旧model_weights/ltx-restoreからコピーでOK、標準画質は新しいモデルなので約13GB（Fast modeは7.7GB）のダウンロードが1回だけ入る
・CLIの名前が変わった：ltx=標準、ltx-4step=良好、ltx-8step=高画質（旧ltx）、ltx-undistilled=最高、GUIの保存設定はそのまま

新旧デフォルトの差は止めて比べたら手とか指とか若干崩れてるけど動画で見るとわからない位

あれーもう11.3来たのか
寝れないじゃんよ

>>736
まとめおつ
高速化にかける情熱が相変わらずスゲーなこの人

簡単に Jasna v0.11.3 + Linux（RTX 5080）でスモークテストとv0.11.2との速度比較をした
新規定の「標準品質」+ Fastモードだと実時間の1.3倍くらいの処理時間まで来てるな

数字はLTXの実処理時間（初回のモデル準備は除く）、30秒の1080p、モザイク2トラック
■同じモデルでどれだけ速くなったか（0.11.2 → 0.11.3、Less overlapは両方オン）
・高画質（旧既定）Fast mode：124秒 → 89秒（0.72倍）
・高画質 INT8：145秒 → 107秒（0.74倍）
・内訳：ステップ2が1ウインドウ0.88→0.71秒、ステップ4が1.90→1.45秒、復元の1ステップあたりは同じ
　モデル読み込みが他の工程と並行になった分で20秒くらい縮んでる
■新既定の標準画質
・0.11.2のLinux既定（高画質INT8、Less overlapオフ）164秒 → 標準INT8 60秒（0.37倍）※作者の「2.7倍」と同じ
・Fast mode同士：0.11.2の高画質Fast 124秒 → 標準Fast 54秒（0.43倍）
・140秒の動画：0.11.2の高画質Fast 414秒 → 標準INT8 198秒、標準Fast 178秒（動画長の1.3倍）
・30秒クリップでのモデル別：標準Fast 54秒、標準INT8 60秒、良好Fast 65秒、高画質Fast 89秒、高画質INT8 107秒、最高INT8 210秒
　※作者の「1.5倍/2.5倍/5倍」は復元工程だけの比で、短い動画だと差は縮む

男優の顔にモザイクあると、それも除去しようとして、余計に時間掛かるのかな

3時間物で33時間掛かる

5070ti
高速モードon

0.11.3を試してみた。新しい標準画質で実時間の４倍弱まで短縮。無修正と言われてもまったく違和感ない画像だが、画面切替わりで一瞬モザイクが見える。win11，RTX5070Ti、XEON-w2133、メモリ64Gb

標準画質でもbasicvsrとは世代が違うわね
0.11.2までの水準とはスクショでじっくり比較して自分にはギリわかるか？レベルかもしれない

2070 8GB
3060 12GB
4060ti 16GB
5060ti 16GB

どの辺から戦えますか？全部無理？

1分ぐらいの動画に切り取って、LTXの標準と高画質で比べてみたけどほとんど差は無いね。
ffmpegで機械的に比較しても標準92、高画質95とかで確かに差はあるが人の目にはわからないぐらい。
標準では10分ぐらいかかったのが、高画質だと１時間近くかかった。* RTX4070 12G
個人的には標準だけでいいや。後でLTXじゃない方と比べてみるか。

まだ2070sで闘ってるけどそろそろ切られそうで怖い

4060Ti 8GBではきつそうなので、5060Ti 16GBポチッてしまった
コーヒー代、25＄払ったんでお返事まだかな

>>744

デカいモザイクを鮮明にするモードを使いたければVRAM16GBは必須。
不要なら12GBかな。

メインメモリを食うから最低でも16GB。32GB有ったほうが良い。

3060の12Gが最低ラインかと。

それは素材にもよる
20分位のアニメなら3060 12GBより3070TI 8GBの方が速い
俺環
あとアプリやモデルの進化で高速軽量化もありえるから無理してGPU買うつもりはない
カネは有限

MSI GeForce RTX 3060 GAMING X 12G VD7552

でフルハイビジョン2時間を設定いいさいいじらずで1時間ちょい

LTXで検出モデルはどれが最適なんじゃろか？

>>751
お好みで

ワシはデフォルト設定で十分満足してる

LTX、デフォの設定で、すごいクオリティ違うな！
21秒の動画で試したけど、BasicVSR++で10秒、
LTXで4分38秒だった。4060Ti 8Gでこれなんで、
5060Ti 16GBでどんだけ短縮されるか楽しみ！

うむ
細かくは書かないが来るとこまで来たんだなと思った

後は速さの問題だな
速度報告よろしくたのむ

Windows11 26H2
Ryzen7 3700X 16GB
RTX3060Ti 8GB

ソース1920×1080 32秒　LTX標準お試しモードで17分47秒でした
ソースの33倍ではグラボを換えないと実用には苦しい
BasicVSR++でガマン

対して破壊出来なかった動画が出来る様になったし、それなりに破壊出来てた動画も精度が上がる。画期的な進歩や。お気に入りの動画のみ、前スレにあった様にアップシーンを何箇所かLTXでやった後、Basicvsrを全体を掛ける。低スペックグラボユーザーのワイは当分これでいく。

さすが生成AIだ
グラボも高くなるわけだ

VRAMにモデルが収まればあとはVRAM容量よりコア数と速度が重要
この点でやはり強いのは5090とPRO6000だな

4060Ti 8GBでFHD 3時間のを試し中
1時間たったが進行は1%
GPUは95%くらい使ってるけど、VRAMが27%しか使ってくれない
他に何も走らせてないのにRAMが31%走ってる。
なにか、RAMに転送させる低スペックモードみたいなので動いてるんだろうか？

まだステップ1のスキャン中だからじゃないかな
復元の本番はステップ3

それですわきっと。
今、GPUのファンがおとなしくなってまた回り始めました
GPU100％でVRAM84%になって頑張ってくれてます

昔のjavplayerみたいにシークバーで処理する部分を選べたら捗りそう

>>762
>>538

ショップブランドのPCからグラボ抜いて箱とか無しに売れるのかな？
5060ti8Gから買い替えたくなってきた

>>764
先週アキバで見てきたけど中古なのに新品と殆ど同じ値段で売ってるのばかり

もう、これはAV選ぶ基準も変わったわ
必死にモザイク取れやすいの探してたの全部無駄w
これからは好きな女優の好きな作品をただ選べばいい

遺品に高価なモザイク除去機を残して亡くなった父親にAiモザイク破壊を見せてやりたかった 合掌