【超解像】Lada part5

前スレ
【超解像】Lada part4
https://egg.5ch.io/test/read.cgi/software/1774864985/
Lada
https://github.com/ladaapp/lada/releases

Jasna
https://github.com/Kruk2/jasna/releases

Lada-EX
https://codeberg.org/comman/lada-ex

誰でも出来るようになって広まって対策されるのは嫌だからな
ていうか既に使ってる人はここに書いてある情報や自分で調べてやれてるんだから、丁寧に書く必要ないだろ？

それは違うんじゃないの？って書いてるヤツ、蜘蛛の糸とかどうでもいいから、お前が教えてやればいいじゃんw

ごめん>>832は>>718をリスペクトしたただのネタなんだ、みんなそんな怒らないで…

正直言って初心者には何をどこからインストールしたらいいかわかりにくい
俺はスクショ貼ったりして何から何までgeminiに教えてもらったよ
エラーが起こったらログをgeminiにそのまま渡したりして、ほんとAI時代になって助かってる

まぁもうすぐ夏休みも終わるし夏休みの自由研究ってやつだろ
夏休みの時期はどのスレもリアル中坊が増えて荒れがちになる
9月になれば落ち着くよ

教えるってコストだけ高くてリターンはゼロなんだよね
それでも詰まった箇所と経緯を詳細に書けば親切な人が答えてくれるかもしれないが、
インストール方法から教えてとか無茶言うなよ

広まると困るというが、モザ破のことを日本語でAIに聞くのって広まるリスクを高めてる気がするわ

それは間接的だからそう心配いらんでしょ。マズイのはSNSでの拡散とかメディアとか表に出てくること。利用者の母数が大きくなることで知能の低いバカッターが人災を起こすリスクも必然的に増大する。悪いことに日本だけじゃないアルヨ。

暗号で話した方がいいね
モ破→moba
など

要らんだろ。排他的にやりたいのなら、そういう掲示板でやってくれ。

排他的にする必要はない
readmeも読まずに来る奴はスルーすればいいだけ。

GPU高いなあ
みんなお金持ちなんだね

高くなる前に買ったからな。
今の値段だと買い替える気も起きない。

ぶっ壊れる恐怖と戦ってるわ

5060Tiって今十万もするのか。
数ヶ月前に9万で買って、3060Tiが2万ちょっとで売れたのはいいタイミングだったんだな。
Qwen がサクサク動くしな。
やっぱりGPU性能よりVRAM容量で選んで正解だったわ。

高くなる前ですら俺にとっては高かった

今知ったんだけど、これってモザイク化した部分を「復元」できるわけじゃなくて、AIでそれらしく「生成」するだけでしょ？

ある程度復元した上で、仕上げで生成もしてる２段階方式だぞ

どっちでもいいやん、生成だろうが元と大して変わんなきゃ復元と言っていい
無修正に自分でモザイクかけてjasna処理したのと比べて見ればいい

現時点の技術ではむしろ超解像処理(≒復元)なしに完全に生成するほうがまだ難しい

ものすごく解像度が低いものを
超解像と予測でこんな感じじゃねえかとやっているだけだと思うが

生成って勘違いする人、定期的に湧くよな

推論と補完が正解？

あんだけ粗い四角が並んでるだけの物を完全復元するのはどういう技術でやると思ってんだ

粗い四角が粗くなくなるまで縮小して形を捉えてそれをAIで等倍までアップスケールしていってる感じだしこれを復元と言えなければじゃあどんな魔法が行われると言うのか、AIはデータで質量がないから過去に行って処理前のものでも持ってきてるとでも言うのか
いや勿論無理だ

みんな破壊するとき、電力制限してる？

データが無いところに足してるんだから生成でしょ
ニューハーフ物だけで学習させればセトカンからチンポはえるよ

元のデータのモザイクが薄ければ復元だし粗ければ粗いほど生成となるが、元のデータを参照して作成してるのは間違いない
復元には限界があるところを無理して再現してくれてるんだから魔法みたいだ

AI｢(あっコイツ無修正裏モノが流出してるの知らないんだ…w)｣

>>867
それはない

生成なら同じ女優が作品によって違うま○こになったりするだろうけど
実際はビラビラならその女優はどの作品でも誰がやっても一貫してビラビラで復元される
凄い技術だよな

生成なら同じ女優が作品によって違うま○こになったりするだろうけど
実際はビラビラならその女優はどの作品でも誰がやっても一貫してビラビラで復元される
凄い技術だよな

jasnaの製作者、セトカン好きなんかな？次期モデルのテストサンプルが多いけど。
フレームの前後データから欠損箇所を生成してるから復元ってことでしょ。顔モデルの置き換えとは違うけどニュアンス的に復元とも生成とも言えるけど。JavPlayerの初期から追ってる人ほど復元だと思ってる。自分もまだ復元だと思う。

現バージョンは超解像(復元)主体でやってるからこそこんだけ処理が速いし
2Dソースなら8GVRAMでも十分実用範囲に入っている
新規モデルのテストで上げてるサンプルは生成技術の比重が上がってるそうだけど、仕上がりと実行時間のバランスが未だ暗中模索の様子

新モデルはMinMax H3をFinetuneしたものって書き込みもあったから生成モデルに移行するんじゃないかな
生成モデルは綺麗に仕上がるけど現状はVRAMと処理の重さがネック

>>866
5070tiでPL80%してるよ

復元から生成に移行したら夢の強制パイパン、強制剛毛も可能になるな

>>877
夢が広がるね

ハゲもいなくなるのか

男優がすげえ美尻になって性癖があらぬ方向へ

>>866
4070tiでPL50%

お前ら何も分かってないな
lada_mosaic_restoration_model_generic_v1.2.pthは
１） BVSR++でモザイク動画の30フレーム分の時系列変化を元に、モザイクのない画像を最尤推定して作る
２）　１）だけだとディティールが欠けていたり不自然になるので GAN (敵対的生成ネットワーク)で画像をブラッシュアップする
という２段構えの仕組みになってるの
お前らが「生成」と言ってるのは多分Diffusion Modelのことだが、GANだって立派な生成AIの一種

ちなみにJavPlayer はモザイク破壊の方式として、TecoGAN と BVSR++ の２種類があってどちらか１つを選んで使うようになってた
分かりやすく言うなら、lada の作者はその２つを組み合わせてlada_mosaic_restoration_model_generic_v1.2.pthを作ったわけ

最尤推定である程度までは復元出来るが完璧には復元しきれない
その足りない分を GAN で補って、つまりある程度の嘘も加えながら、自然に見えるように仕上げているの
だから、完全な嘘の画像ではないけれど、絶対に嘘が混じっていない画像というわけでもない
嘘と真実の区別がつかない丁度いい程度の画像が作られる仕組みになってるわけ

ほうほう

>>882
一行目さえなきゃへえそうなんだってなるかもだし、世間はそういう余計な事言わないから円滑に回ってる
ナチュラルに気の毒な人だ

貴方のその投稿もまた余計な事なのであります。
そしてこの私の書き込みも…

どっちでもいいんよ、要は今より良くなればそれでいい

モザイク化した部分をAIでそれらしく生成してそれらしく「復元」するだけだよ

>>858あて

AIの生成処理「だけ」で局部をそれらしく復元する、は技術的には出来るようにはなってる事はなってるんだけど
これを主体にした方法使うとVRAMめっちゃ食うし処理もくそ遅い
現状、例えば3060で2Dの動画を一本仕上げるのに1週間で終わるかな…？レベルだそうで
ごく一部の廃スペッコPC持ち以外には手の届かないものになってしまう
Jasnaが(現行バージョンだと)とんでもなく軽いのは超解像で処理してる比率が高いから

エロ漫画の海苔とかで同じようなことできるツールない？
AIに補わせるにしても結構細かく指示とか範囲指定しないといけなくて、ファイル投げて終わりのjasnaが羨ましい

>>889
lada_mosaic_restoration_model_generic_v1.2.pthを作った lada 作者の手柄だぞ
Jasnaはlada_mosaic_restoration_model_generic_v1.2.pthを使ってるだけ

>>890
エロ漫画とかエロアニメなんか、illustrious とか WanVideo を使って最初から無修正エロを自分で作った方がマシ

>>891
高速化したのはJaｓnaの人でしょ

開発中新モデルのサンプルはモザイクだったところの境界が全然わかんない
今のモザイク検出領域だけ処理して合成するやり方とは違うアプローチなんかな
ただ、現状は出力動画のfpsが今のMinMax H3の仕様(24fps)になっちゃってる
本番に向けては60fpsでも動くようにfinetune試すようだけど、ダメだったらフレーム生成に頼るようだ
モデル重いと60fpsや4K、8K VRは辛そうだな

「NVIDIA製品を中心に横ばいになっていたグラフィックカード価格が再び高騰」
>>890
あるよ　ググれ

>>890
文面からするとすでにやっていると思うが二次元はComfyUIを使うしかないはず
ファイル投げて完了するのは知らない、あるなら俺も教えてほしい

>>894
境界がわからないようにするのは、単に検出した領域から数ドット大きく修復すればいいだけの話では？

>>897
そういう工夫は今のツールでもやってる
今のツールだと復元された部分にちらつき、もやもや、ボケみたいな形でなんとなく周囲との違和感を感じることがあると思うけど
サンプル結果ではこの違和感をほとんど感じなかったと言いたかった
Discordに元動画・新モデル版・jasna版の3点セットで上がってるサンプルがあるから見てみればわかると思う

参考にしたいのですが、みなさんは1番どの解像度でやってますか？4k.fhd.hd.sd

>>866
3050 8G

新モデルのサンプルが気になってDiscord久しぶりに見てきたよ
珍よりも萬の精度が恐ろしいほど精細になってるなｗ
これは歴史が変わるレベルだわ

そりゃ楽しみだな

また破壊し直しの旅が始まるのか…

javのSRAみたいなもんか？

なんかエロじゃなくて、いかに綺麗にモザイク破壊するのかが目的になって来てるわ

質問

これって動画専用？　静止画は？
復元できるのはモザイクのみ？ ボカシは？

スレに書いてる

静止有料
動画無料
四角並ぶモザイクだけ

顔よりまんこの造形で女優を見るようになった
好みのまんこを見つけるとめちゃくちゃ嬉しい

容姿より興奮できるかどうかだな。
キレイでもマグロは嫌や。

フェラが得意なのは有名だけど
騎乗位のバックアングルも得意だね

fc2で気に入った子がいてその子の動画を収集してるんだけど、素人設定で顔モザイクのヤツがあって、なんとか外したいんだけど、jasnaでは無理かな？
試しにやってみたら、一瞬外れたりはしたけど、ほとんどは破壊できなかった

やめたほうが良い。あの目を見たらきっとトラウマになる。

そういう用途ならフェイススワップの方が良さそう

Jasnaは開発方針として顔モザ除去を対応する気はないそうだから
違うやつでやったらいいかと

やっぱり無理か。諦めるわ

rope使って、素人時代の無修ものに、プロになってからの盛れてる顔くっつけたりは普通にやってるけど

DLSS 5 Visual EnhancerなるWindowsのツールがGithubに公開されてる (サイトはググって)
WebUIから動画を指定してNeural Rendering (NR)を使ったアプスケ(3倍まで)とフレーム生成(120fpsまで)が可能
アプスケ品質はFlashVSRより劣るけど処理時間は桁違いに速いよ
なお 2x/3x 指定時も NR 自体は出力解像度で走るので、「NRで超解像」ではなく「DLSSでアプスケ後にNR」という挙動

自分でCLI化して(未公開)お試しでlada-exの二次復元とフレーム生成に組み込んでみた(jasnaでも同じやり方で動くと思うが未検証)
ざっと試した範囲では、二次復元の自然さは unet-4x > DLSS NR > RTX VSR の印象
速度で選ぶなら DLSS NR はあり
jasna 本体に入るかは作者次だね、新モデル優先なら当分入らなさそう

>>918
情報ありがとう

>>918
動作順序は
DLSSでフレーム補完→NRでアップスケール、であってる？

DLDSSかとオモタ

>>920
DLSS 5 Visual Enhancerは一度に両方はできない
アプスケ or フレーム補完どちらか一方の処理だけ
普通はアプスケ→フレーム補完の順で2回処理するんじゃないかな

なお、lada-exやjasnaで使う場合はちょっと特殊
検出されたモザイクの256x256領域をBasicVSR++で復元
→二次復元としてその256x256領域をアプスケ(ここにRTX VSR、DLSS NR、unet-4xを使う)
→元の256x256サイズに縮小して合成という流れでフレームを作ってる

lada-exとjasnaのmodi版に入れたフレーム生成機能はこの復元フレームを使ってフレーム補完してからエンコードしてる
なので、後付けでフレーム補完処理やるよりデコード/エンコードのセットを1回減らせる
たまに便利な機能

>>922
あなる納得

ladaとjasnaどっちがいいの？

>>924
中華の破解サイトを眺めてるとjasnaが優勢やね

SeedVR2+LoRA一次復元はアニメがBasicVSR++よりうまく処理できるようだ

コーヒー奢って一週間以上経つがいまだ音沙汰なし
時間掛かんのかね

>>927
すぐ来るよ
返事もくれる人だからメッセージ送ってみたら
いちおう確認しとくけど、寄付が15ドルに満たないのに来ない来ないって誤解してた人は先日いた

>>928
ありがとう　送ってみる^^

Buymeacoffeeのアカウントページに入ったら一週間前にメッセージが届いていた！

>>595
Jasna-modi版の人だよね
FlashVSRの2次修復をX4ではなくX2で動かすようにしてみたら、
VRAM12Mbでもタイル分割処理しなくて済む程度になってとりあえず実用範囲にはなったね、もちろん時間は掛かるけど
X2でもJasnaのUNet4xよりかなりディティールが上がってJasnaで修復した時のボケ感がかなり減ったたんで、ひとまず大満足
SeedVR2+LoRAの一次修復はまだ試してない

>>931
Jasna modi版改造＆試してくれてサンクス　595はそうです
スケールx2と周囲との色味ずれ補正対応を入れたFlashVSR二次復元V2版をLada-ex向けに作って
PR出したんだけどJasna向けにはまだポーティングしてないｗ
もし色味ずれが気になるようならFlashVSRを--color-fixつけて動かすようにするのが手っ取り早いです

SeedVR2+LoRAの一次復元が思ったよりもうまくいったので、今は一次復元のLoRA Finetuneを試行錯誤中
(Lada-exの方もいったんPR取り下げた)
古い動画や低解像度の動画、アニメなんかはいい感じに処理できてると思うのだけれど
今どきの1080p動画だとBasicVSR++に比べて時間安定性がいまいちなのをもう少しなんとかしたい

Jasna作者の新モデルがそのうち出るじゃん、なんだけど、あの別次元の出来(但しモデルがめちゃ重そう)を
普通のPCで扱えるレベルに落とし込むまで後どれだけ時間が必要なのかが分からないんだよね

>>932
ここしばらくテストしたデモをバンバン上げてるし新モデル製作にかなり気合入ってるようだけど
いつ実装できるレベルになるのか？実装したとしてどのくらいのスペックなら実用的な重さで済むのか？にはまだ全く先が見えてない感じ
そちらの製作物が磨き上がるんであれば、それはそれで大変ありがたい気がします
とりあえずバッジファイルに動画まとめてぶん投げればFlashVSR2ｘの2次修復まで終わるようにしたので、自分はしばらくこれでいいや

10年前のPCにRTX3050で、ｒｔｘladaはちゃんと動くけど、jasnaはほとんどフリーズ状態になってしまう
スペック高くないとダメなのかな

ｒｔｘlada→lada

>>934
初回起動でモデルのコンパイルが動いていると思われ
日本語READMEには、NVIDIA では通常 15〜60 分かかると書いてある
RTX3050+10年前のCPUだと一時間くらいかかってもおかしくないよ
初回は気長に待つんだｗ

GPUの設定の問題だった

jasnaでできた動画をアップスケールすると、
jasnaでできた動画をアップスケールすると、とんでもなく大きなサイズになるけど
それをもう一度 jasnaで処理すると、1時間程でいい具合にコンパクトなサイズになる
画質の劣化はあまり感じない モザイクの処理具合は一度目のまま

そんなヘンなことしないで普通に ffmpeg で av1 で mkv にするわ

>>938
アップスケールという事は解像度が上がっているのでは？

アプスケの設定が適当でビットレート上げすぎてるんじゃない？

RuntimeError: Failed to mux h264 video into '.mp4' output: Invalid argument

こんなエラー出るようになったんだけどどういう事？手持ちノートPC二台とも

ChatGPTに聞け