【超解像】Lada part5

前スレ
【超解像】Lada part4
https://egg.5ch.io/test/read.cgi/software/1774864985/
Lada
https://github.com/ladaapp/lada/releases

Jasna
https://github.com/Kruk2/jasna/releases

Lada-EX
https://codeberg.org/comman/lada-ex

0.8.1は解凍したの0.8.0に上書きすればよいんじゃろうか？

>>216
別フォルダのままにしておいて0.8.0のmodel_weightsフォルダだけ0.8.1のフォルダにコピーして0.8.1が普通に動くのを確認してから0.8.0フォルダを消す方が無難

>>196
気になったので v0.7.2 と v0.8.1 を同じ動画で比較してみたけど、復元まわり(検出・BasicVSR++・ブレンド)は中身もモデルも同一で
数値的にはモザイク除去率や SSIM/VMAF もほとんど一緒だった 復元自体が良くなったわけではなさそう

ただ v0.8.0 で動画の入出力周りが全面的に作り直されたので数値上は同等でも主観的には変わったように感じる要素はある
明るさがごくわずかに変わってるのと、モザイク部分のテクスチャの出方も微妙に違うことがある
(良し悪しというより別解が出てくるイメージ)
なので、見比べて「良くなった」と感じる可能性は十分あり得る

あと破損した入力動画への対応改善効果と思うけど、カット済みの MP4 の処理でv0.7.x で起きることがあった音ズレが v0.8.x では直ってた

>>213
それ多分 mp4 出力にしてるからだと思う
0.7.x までは処理中に出力フォルダへ生の .hevc が書かれててそれが再生できてた訳だが
0.8.0 からエンコーダが変わって一時ファイル無しで直接最終ファイルに書く方式になった
mp4 は書き終わるまでインデックス（moov）がないから途中再生は原理的に無理
出力を .mkv にすれば処理中のファイルをそのまま再生できるはず

>>215
コマンド見直しサンクス

>>217
ありがとう、動いてる。

>>219
おお！詳細な説明ありがとう。理解できた
mkvなら再生可能かあ..う〜ん..

おととい0.8.0の起動試してGPUドライバのバージョン古い×で止まって、
今日GeForceドライバ最新に更新して初回起動の待ちの間にここ見に来たら、
0.8.1のリリースを知らされた俺って一体

vr処理が速くなって助かる

2時間の2D動画を朝始めて夜に収穫できればいいなら最低限のスペックはどんなだろう
あ、全然なんにもわかってないけど

>>224
RTX2080Tiを積んだデスクトップならいける
ヤフオクだと中古6万くらいが相場
ウチがちょい前までそれでjasnaを動かしてた
処理はFHDの場合で動画の実時間よりちょっと長いくらいだった気がする
なんぼ安くてもGTXじゃ多分動かん　RTX2080Tiくらいが下限だと思う

なるほどありがとう
ゆうても本当になんもわかってないから導入は苦労しそうだけどやってみる

0.8.0から処理速度上がってない？気のせい？

>>226
俺も昨日からRTX3060 12GB（今新品で6万弱）でやり始めた。色々わからないことだらけだけどChatGPTに聞きながら進めてる

>>223
どれくらい速い？

Jasna単体で魚眼やるとモザイク跡がうっすら残ってたから、同じ動画をVR_Video_Toolboxでやってみたら
VR_Video_ToolboxからのJasna利用だと検出漏れしてるところがあるな…　Jasna単体の方が検出が良い
モザイク跡が残るのがなんとかなったらなあ

0.8.1で修正したらしいがまだクラッシュする
0.8.0でクラッシュした素材は0.8.1で問題無かったが別の素材が途中で処理されていなくPCが再起動した
Windowsアップデートが再起動をしたのかも
イベントビューアーにはエラーは無くWindowsセキュリティの注意あり
とりあえずWindowsセキュリティの除外にjasna関連を登録して様子みる
おま環だろうね

>>231
実行ファイル化されたpythonプログラムがウイルスと誤検知されるケースあるからそれに当たったか
(ただ、この場合はPC再起動まではしないと思うけど)
電源容量不足や夏場だから発熱問題などの可能性もあるね

>>229
4kで30fpsだと実時間以下
vr向けのyolo選択でパラメーターはデフォルト
二次復元はrtx 2x
autoで処理
動画によってはモザイク漏れかなりあるが個人的には支障ない
検出パラメーター変更すると多少減ると思われる
何より2Dと同様にD&Dするだけだから楽

>>228
ChatGPTは答えてくれるけど、Claudeは「エロ関係だからダメだよ」って断ってくるな

Mac版を探して来ました
素人には導入複雑ですね・・・

うちのClaudeくんも最初はそうだったけどバカになって2回目聞いたら普通に答えてくれたよ
今じゃ課金してClaude CodeでLADAの復元モデルを追加学習してる

AIは利用規約に引っかからないよう指示の出し方に工夫がいるね
Claude Codeは任せていると勝手にComputer Visionで画像の判断までし始める
凄い便利なんだけど、応答拒否られることがあるから
最近は CLAUDE.md に画像や動画を直接見ないよう指示入れてるｗ

古いAM3のPCにRTX3060の12GBでもJasna動くんだな。PC新調とかも考えてたけど満足出来るレベル

v0.8.1昨日寝る前にいくつか動画放り込んでおいたけど、朝起きたら、どこかでクラッシュしたらしくPCが再起動されてた。
更なるアップデートはよ。

>>235

マシンスペックは？

メアド晒す勇気があるならダウンロードできるようリンク送ります。
あくまでもお試しのunsignedなアプリなので期待はしないで。

他のマシンで動くかどうかも知らないしw

素人で、すいません。Jasna_060からjasna-0.7.2へアップしようとダウンロードしても、インストール出来ません。
jasna-gui、cliも見つかりません。ご指南いただけましたら、大変助かります。どうぞよろしくお願い致します。

>>241
まずそもそも上書きじゃなくて、他のフォルダに新しいバージョンを展開して起動するのが確実よ
てかもう 0.8.1が出てるんだから、そっちにしちゃどうかとも思うけど

DL＆起動手順
DL先は　https://github.com/Kruk2/jasna/releases　の各バージョンのAssetsのところをクリックするとDL対象のファイルリストが表示される
0.8.1の場合で話すると、大体はWindowsでグラボがRTXだろうから、
jasna-windows-nvidia-0.8.1.7z.001
jasna-windows-nvidia-0.8.1.7z.002
の２つをDLしてjasnaを走らせたい場所に両方置いて、7-zipっていう解凍アプリ（フリーウェア）を使って 7z.001 を解凍する　そうすると7z.002の方も一緒に解凍されて jasnaの実行フォルダが出来る（7-zip以外の解凍アプリだと出来ないから注意ね）
フォルダの中に jasna.exe っていう実行ファイルがあるからそれを実行
最初にマシンスペックのチェックが入る
グラボのバージョンが古いだの言われたらNVIDIAから最新ドライバをインストール
そこをクリアして動画の処理に進んだら、初回の処理にコンパイルで大体20〜30分かかるから慌てずにシャワーでも浴びとこう

てなかんじで

ちなみに0.7.2 の場合は　jasna-windows-v0.7.2.7z.001　jasna-windows-v0.7.2.7z.002　jasna-windows-v0.7.2.7z.003　って３つ落とさなきゃいかんようになっとるね

>>241 今はv0.8.1が最新 v0.7.2をダウンロードしたときに気づかなかった？
githubのプロジェクトページに日本語READMEのタブがあるから、まず日本語の説明読んでみたら

>>239
windows updateされただけ

0.8.1でもクラッシュする
解像度が842x474と言う半端なせいなのかな

v7からguiとcliは別々じゃなくてjasna.exeにまとまったんじゃなかったっけ

>>239
>>245
231です
同病ありですね
おま環じゃないのかな
0.8.1持病かも

縦幅・横幅とも偶数だったら大丈夫なはずだけどね
>>245 >>247
・以前のJasna (〜 v0.7.2、動画の入出力周りが作り直される前) では処理できていた？
・動画ファイルに PTS の壊れ (欠落・負値・重複・逆行・大きなギャップ) とかの問題は無い？
・クラッシュはjasnaのウインドウごと落ちる感じでログ見れない？

もし可能だったら以下のチェックツールを流した結果を教えてほしい(WARNとかFAILが出てないか)
ttps://github.com/sh202603/lada-jasna-input-check

>>248
PTSの警告でました

jasnaは負のPTSを破棄せず、先頭を0に平行移動する。ただし重複/非単調なPTS+1されるため微小な時刻ずれが残る
jasna0.8.1→注意
─対処─
［PTS以上］PTSを再生成してmkvにremux（無劣化・高速）

こんなメッセージです、mkvに再エンコしろって事ですか？

>>249
連絡サンクス
この場合は再エンコじゃなくてPTSを修正したmkvファイルを作るよ(無劣化)
ffmpeg -fflags +genpts -i "..." -map 0 -map -0:d -c copy -avoid_negative_ts make_zero "..._fixed.mkv"

これで出力されたmkvをjasnanに入力するとうまく処理されるはず
もし、これでもダメならjasna v0.8.1 側に問題あり

-FixScript <出力ファイル> オプションをつけると実行すべきffmpegコマンドが出力ファイルに書き出されます
動画ファイルが一つだったらこのファイルをテキストエディタ開いて該当行をPowerShellにコピペするのが楽かな

>>250
ありがとう
教えてくれたコマンドで無劣化MKV生成できたんだけど、0.8.1に放り込んてもまだクラッシュします
そのmkvをさっきのチェックツールで見てもOKと出ます
0.8.1のログは吐き出しボタン反応しなくてログが取れないんですよね、エラー後10秒くらいしたら、窓が落ちます

>>251
続けて実験サンクスです これは jasna v0.8.1 側の問題だね・・・
GUIだとログが見れない件、PowerShellが使えるのだったら v0.8.1のjasna.exe がある場所で

.\jasna --input aaa.mp4 --output aaa.restored.mp4 --log-level debug
(aaa.mp4: 問題のファイル)

とPowerShellから打つとCLIでjasnaが動いてPowerShellのコンソールに詳細なログが残るよ

231です
昨日クラッシュした素材を今日再度0.8.1で処理したら問題なく完了しました
Windowsセキュリティの除外登録が効いたのか不明です

v0.8.0とv0.8.1になってAutodepath Image Viewerでうまく3D再生できなくなった
ffmpegで再エンコすると大丈夫だが

>>254
MS storeでHEVC/H.265ビデオ拡張を買ってインストール

0.8.2は4KVRがマジで速いな
8KVRはエラー出てダメだった

jasna0.8.2で直に8KVRに対応するにはVRAM何GB必要ですか？

みなさま。ありがとうございました。お陰様で、稼働出来る様になりました。
感謝です。
出来ましたら、Detection Threshold、Ｔemporal Overlap,などの設定を教えていただけないでしょうか。
どうぞよろしくお願い致します。

0.8.2ていつでたんだ？

>>256
すまん、v0.8.1

新しく作ってるrfdetr-v6ってやばいな。早く実装が待ち遠しい

>>258
そのへんのパラメータの推奨値はめんどかったらデフォでいいと思う
各項目の尻の(？)にカーソル合わせると解説が出るからそれを参考に
おま環やら好みやらの問題もあるし、短いサンプル動画作って条件振って決めればええよ

あ、SECONDARY RESTRATION だけは無課金なら RTX Super Res の選択必須
パラメータはめんどかったら4UUUで　これも同じくチューニングは好みで
時短やら色々メリットはあるけどオレはこれがjasnaのキモだと思ってる

ついでに条件出しのための短い動画作成手順（素人でも大丈夫）

１．モザを取りたくてﾊｧﾊｧしてる動画を用意
２．その動画ファイルをWindows標準付属の「フォト」で開く
３．フォトの画面左上の[トリミング]をクリック→映像の下のスライドバーでモザ取りたい部分を5秒くらい選択→右上の[コピーとして保存]をクリック、適当な名前で保存
４．３．を繰り返して合計30秒分くらいキモの部分を抜き出す
５．「動画結合ソフト」っていうフリーウェアで４．の動画全部合体
https://www.gigafree.net/media/me/join_videos.html
６．合体した動画をjasnaにかけて色々条件振って見比べて唸る

ちなみに３．で120分中の5秒とか実際は選択がムズいので、先にざっくり5分くらい抜き出して、そこから5秒とか切り出すとええです

最近ドキュメントが整理されて前より見やすくなったから
日本語READMEの「さらに詳しく」の部分も目を通しておくとよいかも
Temporal overlap(時間オーバーラップ)とかは「VRAM と GPU 使用量の調整」に書いてある
また、v0.8.0で追加されたSegment Editorを使うとキューに入れた動画毎に検出モデルと検出の閾値を設定することもできるのね
>>263 の玄人志向もやろうと思えばSegment Editorでできそう
検出モデルとしきい値をその場で変えたり、復元のプレビューもできちゃう

>>264
ごめん。コンソールは[JASNA GUI v0.8.1]ってなってるんだけど、
"Segment Editor"っていう項目が探しても見当たらんです。
ビルドじゃないとダメとか？

キューに動画を入れると表示されるハサミマークから起動じゃないの

>>266
ありがとう！ちょっと感動した！ｗ

お試し破壊のサンプルはavidemuxでやってる
残すところ以外を選択してdelするだけだから簡単
書き出しも速い

>>268
こんなソフトあったんだね
ありがたや

LosslessCutは
欲しい部分だけ無劣化で切り出せるし
8KVRもいけるのだ

単発でカットする時：avidemux
複数カットしてまとめるとき：LosslessCut
CLIでやりたいとき：ffmpeg -ss 00:01:00 -to 00:02:00 -i in.mp4 -c copy out.mp4
どれも、再エンコ無しだとキーフレーム単位でしかカットできないよね

それはそう
ただ破壊判定素材として（欲しい部分無劣化）使える
smartcut offで
LosslessCutの話ね

v0.8.0以降は後から追加していた検出モデルは最初から入っているので忘れてたけど、
除去モデルの方は以前と同じで入れ替えた方がいいんだよね？

VRを目の敵にしてる奴は、VRも楽しみたいけど、VR機器買えないんだよ。察してやれ。

0.8.0以降VRが捗る、すごいよ

>>275
VR_Video_Toolboxを使ってで？そんな速くなったん？

0.8.0からAMDにも対応してたのな

lada-exも進化してて1つのファイルを時分割してn列で並行処理する機能が加わった。今まで手動で分割・結合してたから楽に早く処理できる。

>>276
jasna

>>279
片目づつ処理すんじゃなくて、まるごと処理させてってことか。

>>280
JasnaだけでVR左右分割処理も魚眼動画対応も可能になったんだが

>>281
えっそうなの？どこから設定？

>>282
v0.8から詳細設定にVR180モードがあるやろ

>>281
何も設定いらないよ、そのままD&Dすると自動判定

一つの動画で魚眼と魚眼じゃないの両形式が入り混じってる動画でもOKなのがすばらしい
これは全体を魚眼変換してやる方式ではうまくできなかった

あれ？みなさん、8KVRがメインの戦場じゃないの？
うちは8KVR戦場コース痛いエラー「CUDA out of memory.」発生

>>285
shotcutやdavinci resolve studioでシーン毎にクリップ分けて変換してた。
地味に面倒だったし再エンコで時間も掛かってたから大変ありがたい機能だね。

みんなVRの素材はどこのやつから取ってる？やっぱりアダルトフェスタ？

rfdetrは使わずに、2dもvrも全部zelefans-vr-yolo-v2で動かせばいいんかな？

VRはファイルサイズがデカすぎてローカルファイルじゃなくてストリーミングで見てたんだけどjasnaでリアルタイム処理できるならなんとかならんかなあ

>>288
不安座独占は8KVRじゃなければ7日間レンタルして期間中にダウンロードからの夢例亜

もちろん8KVRもいけるけど、公式からデータをダウンロードする必要があるので最も高いやつをチョイスすることになる

VRはVR video toolbox ceでやってる
AIに魚眼の自動判定できないか聞いたら難しいんだって答えて来たけどね
卵かにわとりかみたいな話で、歪んだモザイクはそもそもモザイクと判定できないからだとかなんとか

>>291
kwsk

>>294
検索するとフェイク情報と数年前にはできたけど今はできない古い情報がわんさか出てくる
AIもフェイク情報を真に受けて嘘情報を言ってくるけどそれらをすべてスルーした先に答えがある
ただし、有料で1ファイル当たり60円弱ぐらい
ファイル単位で料金がかかるので、数十ものファイルが含まれる総集編・ベストものとかには向かない

無料のものがあるなら、こっちが知りたい

>>293
jasna0.8の魚眼モードは自動判定してるやろ
魚眼非魚眼混在動画でもいけるんだから

>>295
オンラインサービスってこと？

>>296
自動とSBS+魚眼の場合とで同じ動画でいくつか試してみたがあまり正確に判定できてないみたい。自動だとかなりモザが残る。

javplayerでモザイク破壊を極めたと自己満足して破壊作業から遠ざかっていたんだけど
最近レベチのモザイク破壊動画をネットで見つけこれはと思い調べたら新しい破壊ソフトが
出ているんだね、達人たちお勧めのソフトを教えてもらえたら嬉しい

>>295
お試し1回無料やったらできた なるほどこうやるのね

>>286
4Kは0.8.1でいけるけど、8Kはエラー出るからtool box使ってる
（tool boxでもエラー出る動画もあるから、シーン毎に細かくカットしてやったりしてるけど）
うちのグラボはVRAM12GBだけど、16GBとかあったら8Kそのままいけるのだろうか？

凄いな、今のJSNAはVRも破壊出来るんだな。アダルトフェスタのVR破壊できて感動したわ。問題はアダルトフェスタは月3本しかダウンロードできないから素材に困る。ここみてると、FANZA VRもやれる方法あるみたいだけど、もう少しヒントくれませんかね。

>>301
Windows jasna v0.8.1でRTX5080+検出モデル：vr-yolo-v2+二次復元：unet-4x+ vr-mode auto
でやってみたけど試した8K 60fpsファイルは実時間の3倍ちょい時間かかったがギリギリ完走した
(二次復元無しなら実時間の倍ぐらい)
VRAM 16GBじゃ3〜4GB不足してるんだがjasnaのVRAM Offloaderが働いて、System Fallback Policyを
「Prefer No System Fallback」にしててもOOM出なかった
マージンないので安定して処理したければ4090/5090クラス以上が要りそうだ

>>303
参考になりました
ありがとうございます

>>302
ストリーミング見放題ですか？今、月3本ならあとちょっとでダウンロード月6本になりますね

例の情報は検索ワードによってヒットしない
元の拡張子・変換したい先の拡張子・何を除去したいのかの3つのワードで検索

次復元のunet-4xって他のどんな違いがありますか？RTX Super Resolutionだとノイズが減ったよりディテール失われたって感じでしたので。

>>306
日本語READMEの「モデルの選び方」に書いてある説明の通りだけと、unet-4xは追加でかかる時間と得られる効果のバランスが良いモデルと個人的には思う
TVAIは持ってないのでunet-4xがTVAIと同程度の出来なのかはわからない
ディテール補うならDiffusion系のアップスケーラーが良いけど、凄い時間がかかるよ

自分用、晒す



https://jpeg.men/1H9No5PmTnJ.jpg

誰かに承認してもらいたいのw？

はい、そうです

アニメ用のモデルを

>>305
そういうツール使って公式アプリに入力した認証情報を抜かれない？

今更だけど、VRの自動って推奨されてるから、自動的に「SBS」か「SBS+魚眼」を識別してくれるものかと思ったけどそうじゃないのな
魚眼のモザが全く処理されていないということは「2D」か「VR（魚眼じゃないSBS）」を識別してくれるってことかな？
「SBS+魚眼」では魚眼じゃないモザも処理されるらしいから、VRなら「SBS+魚眼」、2Dなら「オフ」にするのが正解？
魚眼じゃないVR専門で扱うのならいいかもしれないけど、実際、魚眼も多いので「自動」は使わないな

SBS左右別処理は画面全体に処理がかかるっぽいからチェック服とかで誤認識でボケが入ったことがあった

SBS魚眼はモザだけを処理して修復差分だけを元映像に被せるという革新的な方法をとっているので
モザ領域以外の画質低下が無くなったと感じたし魚眼でもそうでなくてもこればっかり使う

しかし俺環かもしれんが透明なモザイク痕が残るんだよね
イシューにWhy do I see a halo around the deleted mosaic?
って質問があるからその結果に期待なんだが…

Fable先生のjasna --vr-mode auto 挙動ざっくり解説
動画ごとに off / sbs / sbs-fisheye を自動で選ぶ 判定は保守的で、確信がなければoff
・ファイル名にフィッシュアイ系の品番 → sbs-fisheye
・直接SBS系の品番か、VR用メタデータあり、またはぴったり2:1で1080超 → sbs
・それ以外（アスペクト比が2:1じゃない、幅が奇数含む）→ off
sbsは左右の目を別々に処理 sbs-fisheyeはさらにフィッシュアイ空間に再投影してから復元
判定結果はログの VR mode: resolved=... で確認できて、外れたら --vr-mode で明示指定すればOK

選べる