【超解像】Lada part6

前スレ
【超解像】Lada part5
https://egg.5ch.io/test/read.cgi/software/1782703217/

■　URL
Lada
https://github.com/ladaapp/lada/releases

Jasna
https://github.com/Kruk2/jasna/releases

Lada-EX
https://codeberg.org/comman/lada-ex

検出モデル　v2_accurate
https://huggingface.co/zelefans/vrmr/tree/main　の
lada_vr_mosaic_detection_model_v2_accurate.pt

除去モデル　basicvsrpp-generic_v1.2_full
https://huggingface.co/ladaapp/lada/tree/main　の
lada_mosaic_restoration_model_generic_v1.2_full.pth

■　不具合があった場合に試してみる事

・GPUスケジューリング　オフ
スタートメニュー＞設定＞システム＞ディスプレイ＞グラフィックの設定
ハードウェア アクセラレータによるGPUスケジューリング＞オフ

・最新グラフィックスドライバに更新

jasnaのパッケージにffmpegは入っているから別途入れる必要はないぞ

ladaだけじゃだめなのすか
ジャｓナって別ソフトですよねい？

>>280
ffmpeg は関係なさそう
Errno 542398533 は「エンコーダを開く時点で CUDA が既に死んでた」時に出る番号
GPU 非対応や設定ミスなら別の番号になる
つまり原因はエンコードより前にあって、エンコーダはとばっちり
見てほしいのは以下：
・エラー全文
　avcodec_open2(...) の後ろに last error log: [hevc_nvenc] ... って続くはずで、そこが真因
　その少し上に thread crashed や CUDA error の行がないかも
・GPU 型番・VRAM 容量・ドライババージョン
・起動時に Sysmem Fallback の警告が出てないか
・配布版や別の環境から持ってきた .engine や *_sub_engines フォルダを model_weights に置いてないか

あと winget の「無効な構文」は、たぶん Python の >>> 画面で打ってるのでは
PowerShell で打てば通る

>>282
modi版試したいわけじゃないのかな？
jasna使ったことが無いならまずは本家のバイナリ配布パッケージを落としてそっちを使うのが良いよ

>>283
1/3くらいしか解らないけどありがとうございます

powershellでも同じなんすよ
しかもpowershell 7ってのを使えってなってたので
それｄも試しましたがダメ。つか7か何か知らんけど
上位版出して使用推奨なら、その7をpowershellにしてくれ
win+rでpowershell7だとだめでpower 7(スペースが必要)
死ね

GTX-1060 6GBというの使ってます
スペック足りないとか非対応なんすかね
視聴はできるけどおっそいのでエクスポートしたいんすよね

>>284
まずは無印かなと思いまして。でもジjasnaも試してみます。
何かwin MEネトラン見ながらあれこれ調整してた時期を思い出させる
疲れました

つか使用要件満たしてないじゃんmy PC
どなたかがやってくれるの待つしかないか

>>287
GTX 1060は非対応だｗ
使ってるCUDA 13系のtorchとTensorRTがPascal世代のカーネルを持ってないので
最初のGPU処理でCUDAが死んで、エンコーダ側がそのとばっちりでこけてた
スペック不足というより世代の問題、さすがにカードが古くて対応もムリポ

最新でVRAMの値が大きいほど良いのはわかるけど価格が高すぎw
jasnaが動く最低のスペックを教えて下さい　
破壊に要する時間がかかっても大丈夫です

>>277

claude はそんなこと言わなくてもやってくれる

>>285
全く関係ないかもしれないけど、以前、なぜかうちの3台のPC全てでWinGetが使えなくなったことがある
PowerShellでもコマンドプロンプトでも何も実行されない（エラーは出ないので存在はしている）
それに伴いマイクロソフトストアも使えなくなった（ダウンロードしようとすると落ちる）
WinGet・マイクロソフトストアの問題で調べて出てきた解決法は全てやってみたがダメ
普通に使う分には問題なかったのでそのまま使っていたが、親戚のPCを組む際にWinのインストールUSBメモリを作ったら、これで上書きインストールできそう
で、3台に上書きインストールしたら2台は直ったが、1台はダメだった
結局、色々試していた時に、システム⇒アプリ⇒アプリの詳細設定⇒アプリ実行エイリアス（または左下の検索で「エイリアス」）でWinGetをオフにしていたせいでオンにしたら直った

ちなみに、いつぞやのWindowsUpdate適用後に、3台共にタスクバー右側の日時・音量・IME状態・インジケーターなどが表示されなくなった
これは地味に不便だったので色々やってみても改善されなかったのだが、上書きインストールであっさり直った

最近、JAVのモザが平均的に濃ゆくなった気がするんだが、ワシの気のせい？
せっかくゆきりのが復活してくれたのに、パイパンのハンデ抜きでもモザが厳しくて破壊がイマイチで。( ´Д`)

>>291
ありがとう！
エイリアス確認したけどONでした新規PC買うかあ
ちなlada-legacyてのが使えるかもみたいな記事見たんだけど
どこでgetできますか

>>289
ボロボロの冷却ファン2回交換したRTX2060S(8GB)だけどJasnaは問題なく動作している。時間はかかるが、JavPlyaerよりは格段に速いのでOK (感覚的に平均30fpsくらいかな)

>>295
レスありがとう　
JavPlyaerより格段に速いという事なのでRTX2060S(8GB)でJasnaに
チャレンジしてみる

11まだ？

今週か来週かって作者は言うてるけどどうなんだろうね

>>296
RTX2000台を今さら買うなら、絶対中古にしといた方がええよ。
2060でもいいなら、2070、2080はもっと性能上なので無難な上、どれも相場は同じで 15000〜20000円くらい。
そのあたりをヤフオクで物色して、評価が高い出品者のを落とせばまず大丈夫よ。
焦らなきゃ12000円くらいで落札できる場合もあると思う。
2000台でまずは走ってみて、新品に買うならもっと後でいいと思う。

ワシもしばらくRTX2080Tiで走ってた。FHDのjasna破壊で実時間と同じくらいだったっけな？
後処理もRTXがしっかり出来たと思った。LADAよかすげえって感動した記憶あるしｗ
蛇足だけど、中古のRTX4080sにしたら処理時間1/3になってRUN中の電力負荷も2080よか小さくなった。
ケースの電源容量が足りなくてボードが落ちてブラックアウトってのが2080ではよくあったのだけど、4080では皆無。
電気代が気になりだした頃に上のボードを考える、ってのも一つの目安かも。

>>288
GTX系だと最低1660だろうな

>>299
詳しくレスしてくれてありがとう
博士が開発したJavPlaerでモザイク破壊を極めたつもりで破壊作業から遠ざかっていたんだわ
久々にsupjavを見たらモザイク破壊度がレベチの作品を見てびっくりw
調べてみたらjasnaというAiを利用したソフトでグラボがGeForce RTXが必要というのが分かった
Radeon使いなんでGeForce RTXを購入する必要があったので専門スレで聞いた方が早いと思い
相談しました　本当に助かりました　>>295にも感謝です

視聴はできるんよねえ
読み込み時間かかるから鬱陶しくて
エクスポートしようとしたらこのざまだよ

>>298
ありがとう
正座して待ってます

vrはモザ残りまくりなんだが、2dと同じくらいに出来る様になったと言うのは別のソフトの話？どこにあるの？

VR動画の作成工程は正確にはよくわからんが、上下のモザが扇型に変形するから破壊できなくなるんだよな。
元動画は魚眼（円形、左右別撮り）で撮影されててその円形の動画時点でモザイクを掛けて、その後スクエアに処理工程で画面の上下のモザが変形するという解釈でいいかな？

>>304
そんな話はどこにもない

大半はモザイク残らん
乱交ものは無理ぽ

VRの画面下端付近のモザは、検出はすれど破壊しきれないね

Jasna 0.11.0 beta版/RC版 のLTXテスト結果
設定は以下の3つ
・Fast mode：OFF (デフォルト、INT8) or ON (NVFP4)
・Model：Standard (デフォルト) or Best
・Sharper large mosaics：OFF (デフォルト) or ON
わかったこと
・Sharper large mosaics ONはVRAM空き12GB必要(足りないとOFFにフォールバック)
・処理時間はほぼウィンドウ数×GPU性能で決まり、入力解像度の影響は小(但し、4Kは追加時間あり)
・Fast mode ONはOFFより約1.4倍高速、VRAM約2.5GB節約、品質はOFFがわずかに上、RTX 50限定
・Best Modelはdenoise 15step (Standardは8step)、少し高品質だがStandardの約1.5倍遅い
・Sharper large mosaics ONはOFF比で2～3倍遅く、効果が出るのは大きいモザイクだけ
・Fast modeだけONにしたとき、長尺動画での処理時間は実時間の約3.2倍(5080)～8倍(5060 Ti 16GB)くらい
・トラック数の影響は小さいが、カット数は大きく影響、頻繁なシーン切り替えはかなり不利
※ウィンドウ数、カット数、トラック数はLTXのスキャンステージでカウントされる数
※すべて正式リリース前の beta版/RC版での結果、0.11.0正式版では変わる可能性あり

LinuxのRC版でlada-yolo-v4がコンパイルできないバグ見つけてしもて、さっきまで対策版の確認してたｗ
対策OKが確認できたんで、これが最後だといいな(WindowsのRC版もyoloコンパイル問題は直ってる)

7年前に買ったパソコンでやってるけど、新しい機能が追加されると、グラボ買い替えないといけなくなるかな？しかし、高いよな。

最低GTX16系
RTX以降が望ましかばい

lada-exもSwiftVRに対応したので実行してみた。5秒ほどのテスト動画だから処理速度など判断できないけど綺麗なのは俺でもわかった。ヘアの解像度なんかマッキーからボールペン位には繊細になってる。

ここまで、
「VR」っていう単語が”エロ動画の3D-VR”と”超解像度AIのVR”で被っちゃってるのだけど、

わけわからんくなってるオッサンには、チャッピーに
『「FlashVSR」、「SeedVR」、「SwiftVR」の特徴と、各々の長所短所を教えてください。』
って質問してみることをお勧めしたい。

スレだけ読んでるとわけわからんくて困っちゃうよねマジ( ´Д`)

>>313
nvidia-vfxの新しいバージョン取り込んでRTX VSRを使ったフレーム生成や出力を直接アプスケする機能も追加されてるね
Lada-ex作者さんとはPRでレビューしてて、ようやく実用的な処理速度と品質が出せたSwiftVRを取り込んでもらった

>>314
いろいろ手だしてスマソｗ

JASNAのエンコード画質いろいろ試したんだけどさH264、H265、AV1　どれも画質悪くない？
他のソフトでエンコしたもんより2段階ぐらいノイジーだし、ファイルサイズも下手すると3倍くらいに膨れ上がる
H264に至ってはQB1ですら細部が消える(ちんこから鈴口が消えた)
仕方ないからH265かAV1のQB1を中間ファイルとして吐き出してるけど　なんだかなぁ

>>315
いやいや、色々と情報ＵＰしてもらえて、そういうもんがあるってのを教えてもらえる
だけでもすごく有り難いし、感謝してるっす。
ご遠慮なく引き続き頑張っちゃって下さいｗ わからんことはチャッピーに聞くからｗ

>>285
jasnaのforkリストの上から2つ目に出てくるやつで、こういうforkがあるね
adding pre-Turing GPU support (GTX 10-series / Pascal and Volta), selectable encode/decode devices, and per-GPU TensorRT engine archiving. See README-BUILD.md.
自分はハード持ってないので試せないのだけれど、1060で動くかも?

>>318
githubのREADME.ja.mdには要件として
「NVIDIA の GTX 16 シリーズ / RTX 20 シリーズ以降の GPU。
GTX 10 シリーズ以前のカード（GTX 1050/1060/1070/1080）では動作しません」
てなっててあきらめたんやけど、そのforkってどこにあるん？

>>319
つ ttps://github.com/QingLiu2333/jasna

お、来るか

>>320
おおお！神かな？
ちょっと試してみますね
ありがとう！

jasna作者からメールでコードが送られてきた。v11からは再度入力が必要な模様。v11 近日リリースって書いてあった。

0.11以降用のコードが届いてる
リリースはもうすぐかな

>>315
fast-pipline、vr-fisheye、tensorrtでの基本処理に加えてSwiftVRの2次復元、RIFEでの30fpsからの60fpsフレーム補間、VSRの2倍アプスケのフルセット同時実行も5080で動いたw
数日前にvramオフロードも実装されてたのですね。

>>325
--frame-gen-backend nvvfx でNVIDIAのVideo Frame Generationを選択できるので、これに切り替えると最強ｗ
jasna modiにも実装したけどRIFEの10倍速でフレーム生成できました

作者からのアプデ通知、Google翻訳の日本語訳だけ貼っとく。コーヒー奢ったやつに届く内容のやつ。
特典に興味あったらコーヒー奢ってみるとええのかも。
『Jasnaをご支援いただきありがとうございます！ライセンスコードは以下の通りです。』
『このコードは、近日リリース予定のJasna v0.11以降のバージョンでご利用いただけます。リリース後、Jasnaを開いて「オンライン（Online）」タブを選択し、コードを貼り付けてください。最大3台のデバイスでご利用可能です。』

追加課金も辞さない腹だったけど以前のコーヒー代だけでいいっぽいな
アレで追加した二次修復モデル・静止画修復モデルとは作業量の桁が3つくらい違うだろうに太っ腹だわね

0.11来たね。

最近検出ばっかでお腹いっぱいだったけど復元モデルどうや？

来たな！

課金しててよかったと思える

まだためせてないけどLTX使うには$25ってあるけど前回$50払ってる俺はどうなるんや

>>333
既に支援済みだったなら、メールにコード送られてきてない？

>>334
コードは来たけどLTXが使えるのかどうかは記されてなかったので気になった次第なんだが、先ほど有効化できてLTXモデルDL中
LTXのお試しモード無効の状態で実行できればOKってことかなあ

LTX、今までにコーヒー奢った人は使えるみたいだね。これから奢る人は25ドル出さないとダメみたい。

>>335
Current supporters get LTX for free
てあるよ(既にサポートしてくれてる人にはLTXは無料です　続けて、だけどコーヒーもう一杯おごってくれたらうれしいなあ　て書いてる)
これから支援する人からは新価格って事かと

すまん見逃してた
そう言うことか

作者相手にどんだけコーヒーが好きなんだよ！ってボケる勇者はいないのか

モデルがDL完了してもLTXがエラーになる
前回15ドル払ったけど、LTXを使いたい場合はあと10ドル奢ればいいってことなのかな

丁度v10で動画放り込んで寝ようと思ってたけど、v11来たから中断。起動時になんかエラー出たけど起動した。これ無事使えるのかな？
てか、LTXモデル14Gもあるのね。
高画質は遅いらしいが、どの程度なのか？とりあえず明日の朝が楽しみだ。

https://github.com/Kruk2/jasna/blob/main/docs/en/models.md#downloading-ltx-yourself
作者の人より、LTXモデルの自動ダウンロードが失敗する場合はこっちから落としてですって

設定によってはVRAMの空きが12G必要みたいだけど、デフォルトならオレのグラボの11Gでも使えそう。早急に買い替えなくても良さそうだな。

一度失敗したな
処理は無事完了、めっちゃいいわ

初回デフォ設定でFHD30fps1分のmp4に18分かかった
出来は確かにいい
もう少し早くなるといいな

LTXって2Dアニメどんな感じ？

0.11.1から起動時にGoogle IMEとCLaunchがエラーでる意味不明
入力系と相性があるのかな

他のゲームやアプリでたまにあるけど言語設定を　米国にしろっていうパターンじゃないのかね

俺も「何とか.dl」のエラーが出てたけど、その後普通に起動したのでとりあえずLTXのDL中
ちゃんと動作するかどうかは不明

起動時のエラーが関係してるのか不明だけどLTXだけエラーで動かないわ
モデルはダウンロードできたし手動でも入れ直したけどダメだ

まーたエンコし直しの日々が始まるのか(歓喜

5080以上じゃないと一本丸一日コースだな

前回$15払ったのに新キーが来ねえ

LTXを全て最高品質にしてSD40分くらいの動画を5080で処理させてるが予定終了時間3時間半くらい

5060Ti16Gで30分の動画を標準•高速でやってみてるけど、いまステップ2でETAが8時間とか出てる。これはきついな。

あ、FHD 30fpsの動画ね

>>346
おそらく元動画ではこんなに描き込んでないよね？ってレベルにディティールが書き込まれることもある
リアルの素材でしか学習してないっぽいけど、basicVSR+とは別次元な何かなのでので試す価値はある、かも

出来栄えは評価してないけど、試したアニメテストデータはカット数が多くて通常の動画の3倍位時間がかかった

5070tiだけどbasicVSR+では1時間かからなかった動画がLTXの高画質・高速モード無しで24時間かかりそう
こりゃ必要な部分だけカットして通常画質の高速モードにしないとやってらんないな

高速モードだけONと高画質・高速モード無し・でかモザ対応ONでは処理時間に4〜6倍差が出る
一番画質の良い設定はまず短い動画で試した方がよいよ
細部が鮮明に出過ぎて逆にリアルじゃない・不気味の谷的な何かを感じることもあったｗ

まいった、今までjavplayerでずっとやってきてladaとか全然知らなかったんだが使ってみたら全然解像度は違うわgtx1080じゃ動かないわ……RTX買って今までのやり直すか……

>>360
自分の環境じゃVRAM足らなくて試せないけど
解像度が480Pとかの動画のほうがむしろ高画質モードがあってるよかん
これまでなら仕上がりがめっちゃぐちゃってたかなーリ古い動画でも驚異の再現するようになったんで、ボケるの惜しいわね
これにModiの2次修復掛けられたら…

ブラウザエロゲの短いクリップでいくつか試したところ、アニメ(Spineで作ってるぽいやつ)の再現度までかなり上がってた
汁描写とかもきっちり分けてんのがびっくり、高画質のJAV以外は特に学習してないって話だったけど…
そのかわりv2vRがなくなっちゃったんで(再追加できるのか？はまだ試してない)検出に苦労するかもしれない

寝る前に放り込んで、今見たらSTEP2で残り時間が240hとか表示されてるんだけど。こりゃ使い物にならないか？

とりあえず1分以下ので試そう、使い物にならないなんて考えはすっ飛んでくと思う

俺のマシンスペックでは、という意味ね。

今はRTX2080Tiなんだけど、グラボ買い換えるかなぁ。
素人考えであれなんだけど、グラボ買い足して、2枚を平行処理みたいな有効活用ってできるのかな？

2060 Super でもLTXは動作しました
30 秒のお気に入りシーンを処理してみたら、非常に鮮明で素晴らしい結果だった。これはもう Uncen と見分けつかない。
basicVSRでのノイズや不鮮明な部分もなくなっている。モザにもよると思うので、ちょっと他の動画も数十秒切り出しでやってみて最終評価かな

>>364
Windowsだと共有GPUメモリ(つまりシステムRAM)に退避できるから、OOM回避してゆっくり動いている可能性ある
共有GPUメモリがVRAMサイズを大きく超えて使われていないかチェックしてみたら

>>362
復元力はそうなんすよ
LTXモデル改善のフィードバックを募集しているので、ボケ気味なのはそのうち改良されそうではある

8GBのVRAMだと13GBがメインメモリに溢れている。
GPU使用率も10%台。GPU欲しくなるね

>>353
コーヒーにメルアドでログインしてマイページ開くとMessagesに届いてるはず

てすと

5090でfhd29.97fps 5分半の動画がyolo4、LTXモデル標準、高速モードオン、大きなモザイクオンで20分ちょいだったわ
VRAM使用量は約20GB

>>367
俺の経験上、売っぱらって新しいグラボに変えるべき。VRAM16ギガのやつにしなよ。

4070でLTXデフォルト設定だと
7倍ぐらいの時間がかかる。
今までのだと半分ぐらいの時間で終了してた。

ファイル名に日本語使ってたせいか
最後のファイル書き出しでエラー発生。(従来のモデルだと問題いなかったんだけどなぁ)

うーん、処理時間が実用的ではないね。
ハイクラスのグラボでもそんなに？

博士が普及型のグラボでの処理に拘ってJavplayerを作ってくれていたのも今更ながら尊敬するわ。

さて、今後のスピードアップ化は望めるかなぁ。

LTX凄まじいなさすがDiTだわ
出来栄えが完璧

Jasnaの人も軽量化にはずーっと力入れてるでしょ、前バージョンまでにJavPやladaよりどんだけ軽く速くなってたか
実質的にメジャーアップデート第一弾なんだからまずは質を素直に喜んどくべき