前スレ
【超解像】Lada part6
https://egg.5ch.io/test/read.cgi/software/1789682962/
■ URL
Lada
https://github.com/ladaapp/lada/releases
Jasna
https://github.com/Kruk2/jasna/releases
Lada-EX
https://codeberg.org/comman/lada-ex
検出モデル v2_accurate
https://huggingface.co/zelefans/vrmr/tree/main の
lada_vr_mosaic_detection_model_v2_accurate.pt
除去モデル basicvsrpp-generic_v1.2_full
https://huggingface.co/ladaapp/lada/tree/main の
lada_mosaic_restoration_model_generic_v1.2_full.pth
■ 不具合があった場合に試してみる事
・GPUスケジューリング オフ
スタートメニュー>設定>システム>ディスプレイ>グラフィックの設定
ハードウェア アクセラレータによるGPUスケジューリング>オフ
・最新グラフィックスドライバに更新
【超解像】Lada part7
ハカイダーが集いし次スレはここですか・・・
名無しさん@お腹いっぱい。
返信 [1]
v2_accurateってまだいるん?
名無しさん@お腹いっぱい。
返信 [1]
>>1 乙です。結局コピペしたのかw んじゃ補足。
>>1のリンク先には既にいわくの検出モデルと除去モデルは置かれてません。
以前に出回ってた *detection_model* *restoration_model* も0.11.1以降にまんまコピペするとBasicVSR++が動かなくなります。
ファイルを持ってる場合の適用方法は以下ご参考。
(1)前スレ>>641のコピペ
> BasicVSR++ 復元モデルの V1.2_full が jasna v0.11.1 から読み込めなくなった件
> 対応方法をmodi版の docs/ja/models.md の付録に書いた
> 今のjasnaでもV1.2_full版使いたい人がいたら見てみて
(2)前スレ>>646のコピペ
> つ ttps://github.com/sh202603/jasna/blob/modi/docs/ja/models.md
上記がわからん場合の参考手段
(3)前スレ>>612のコピペ
> 手はあったw
> AIにBasicVSR++のV1.2_fullファイルをweights_only=Trueで読み込めるよう変換してって頼めばやってくれると思う
> Claude Codeでは出来た
投稿してくれた有志へ感謝 ( ´∀`)人(´∀` )
>>1のリンク先には既にいわくの検出モデルと除去モデルは置かれてません。
以前に出回ってた *detection_model* *restoration_model* も0.11.1以降にまんまコピペするとBasicVSR++が動かなくなります。
ファイルを持ってる場合の適用方法は以下ご参考。
(1)前スレ>>641のコピペ
> BasicVSR++ 復元モデルの V1.2_full が jasna v0.11.1 から読み込めなくなった件
> 対応方法をmodi版の docs/ja/models.md の付録に書いた
> 今のjasnaでもV1.2_full版使いたい人がいたら見てみて
(2)前スレ>>646のコピペ
> つ ttps://github.com/sh202603/jasna/blob/modi/docs/ja/models.md
上記がわからん場合の参考手段
(3)前スレ>>612のコピペ
> 手はあったw
> AIにBasicVSR++のV1.2_fullファイルをweights_only=Trueで読み込めるよう変換してって頼めばやってくれると思う
> Claude Codeでは出来た
投稿してくれた有志へ感謝 ( ´∀`)人(´∀` )
Nvidiaの多くのグラボは性能をソフトで封印されていた…解除で2倍と日本人歓喜
https://greta.5ch.io/test/read.cgi/poverty/1792982067/
Linux、3000シリーズのみ?
https://greta.5ch.io/test/read.cgi/poverty/1792982067/
Linux、3000シリーズのみ?
LTXはVRにも使えるよね、時間は解像度に応じてかかるけど
もちろん、LTXの場合はVRモードは使えない(BasicVSR++を使えとエラーが出る)
VRモードを自動にした場合は2Dと検出されるといけるが、VRだと検出されるとやはりエラーが出る
魚眼ではないSBSはVRモードをオフにしてLTX2Dモードでやればいい
左右一緒にやるのが気に食わないなら、昔のzelefansの方法でやればいい(さらに時間と手間がかかるが)
魚眼のSBSは前スレの79に書いたように
ffmpeg -i input.mp4 -vf "drawbox=0:0:iw/2:ih:black,drawbox=iw/2:0:iw/2:ih:black,v360=hequirect:fisheye:in_stereo=sbs:out_stereo=sbs" -c:v hevc_nvenc -rc vbr -b:v 174000k -maxrate:v 261000k -c:a copy output.mp4
(入出力ファイル名と2つのビットレートは適宜変更)で(dual)fisheyeに変換した後、LTX2Dモードでいける(元のhequirectに戻さなくても再生可能だし、そのまま見ても楽しめる)
品質は2D素材よりは落ちるがBasicVSR++とは比べ物にならない
もちろん、LTXの場合はVRモードは使えない(BasicVSR++を使えとエラーが出る)
VRモードを自動にした場合は2Dと検出されるといけるが、VRだと検出されるとやはりエラーが出る
魚眼ではないSBSはVRモードをオフにしてLTX2Dモードでやればいい
左右一緒にやるのが気に食わないなら、昔のzelefansの方法でやればいい(さらに時間と手間がかかるが)
魚眼のSBSは前スレの79に書いたように
ffmpeg -i input.mp4 -vf "drawbox=0:0:iw/2:ih:black,drawbox=iw/2:0:iw/2:ih:black,v360=hequirect:fisheye:in_stereo=sbs:out_stereo=sbs" -c:v hevc_nvenc -rc vbr -b:v 174000k -maxrate:v 261000k -c:a copy output.mp4
(入出力ファイル名と2つのビットレートは適宜変更)で(dual)fisheyeに変換した後、LTX2Dモードでいける(元のhequirectに戻さなくても再生可能だし、そのまま見ても楽しめる)
品質は2D素材よりは落ちるがBasicVSR++とは比べ物にならない
名無しさん@お腹いっぱい。
豊彦系で、LTXで処理すると、どうしても少しだけモザイク残り
する動画があった。
どうにかならないかと、パラメータを検証してみた。
最初「検出モデル」や「検出しきい値」が怪しいと
試行錯誤してみたが、直らず。
しかたなくその他を試してみたら「大きなモザイクをより鮮明に」が
原因だった。これをOffにすることでモザ残りは解消した。
ほかの動画は大丈夫なので、豊彦系のモザイクだけが特殊なんだろうね。
する動画があった。
どうにかならないかと、パラメータを検証してみた。
最初「検出モデル」や「検出しきい値」が怪しいと
試行錯誤してみたが、直らず。
しかたなくその他を試してみたら「大きなモザイクをより鮮明に」が
原因だった。これをOffにすることでモザ残りは解消した。
ほかの動画は大丈夫なので、豊彦系のモザイクだけが特殊なんだろうね。
返信 [1]
名無しさん@お腹いっぱい。
返信 [1]
4KVR60fps1作品に5080で7時間近くかかったvram消費量は分割処理で12gb
出来は従来のものよりかなり良かった
いずれ8KVRも破壊できたらいいな
出来は従来のものよりかなり良かった
いずれ8KVRも破壊できたらいいな
画像生成にハマって出遅れたけどLTX試した
こんなん猿になるわ
いままで駄目だった奴も軒並み破壊しよった
こんなん猿になるわ
いままで駄目だった奴も軒並み破壊しよった
返信 [1]
生成とは別腹なのよねコレ
人間のスケベの業の深さを身を持って体感だ
人間のスケベの業の深さを身を持って体感だ
名無しさん@お腹いっぱい。
>>9
魚眼じゃないのは周辺部分がひん曲がった状態で処理するので仕方ないですね
まさか、魚眼の方が有利になることがあるとは以前は思いもしなかったですけど
そのまま変換すると魚眼の外側にゴミが出てしまうので >>7 のようにdrawboxを入れたけど、入れると変換処理時間が2倍かかるので、速い方法を考えてみた
思いついた方法では、枠の透過pngを作成してオーバーレイするのが最も速かった(そのまま変化よりは遅いけど)
・枠の透過png「waku.png」を作成
ffmpeg -i input.mp4 -vframes 1 -vf "drawbox=0:0:iw:ih:black:fill,drawbox=0:0:iw/2:ih:white,drawbox=iw/2:0:iw/2:ih:white,colorkey=black,drawbox=0:0:iw:ih:black:fill" waku.png
・「waku.png」をオーバーレイ処理した後に変換
ffmpeg -i input.mp4 -i waku.png -filter_complex "overlay=0:0,v360=hequirect:fisheye:in_stereo=sbs:out_stereo=sbs" -c:v hevc_nvenc -rc vbr -b:v 174000k -maxrate:v 261000k -c:a copy output.mp4
魚眼じゃないのは周辺部分がひん曲がった状態で処理するので仕方ないですね
まさか、魚眼の方が有利になることがあるとは以前は思いもしなかったですけど
そのまま変換すると魚眼の外側にゴミが出てしまうので >>7 のようにdrawboxを入れたけど、入れると変換処理時間が2倍かかるので、速い方法を考えてみた
思いついた方法では、枠の透過pngを作成してオーバーレイするのが最も速かった(そのまま変化よりは遅いけど)
・枠の透過png「waku.png」を作成
ffmpeg -i input.mp4 -vframes 1 -vf "drawbox=0:0:iw:ih:black:fill,drawbox=0:0:iw/2:ih:white,drawbox=iw/2:0:iw/2:ih:white,colorkey=black,drawbox=0:0:iw:ih:black:fill" waku.png
・「waku.png」をオーバーレイ処理した後に変換
ffmpeg -i input.mp4 -i waku.png -filter_complex "overlay=0:0,v360=hequirect:fisheye:in_stereo=sbs:out_stereo=sbs" -c:v hevc_nvenc -rc vbr -b:v 174000k -maxrate:v 261000k -c:a copy output.mp4
5000番台にしたなら高速モードを試さなきゃってことで以下でした。
Jasna
FHD 21秒 処理 4分38秒 → 2分17秒 → ON 2分10秒
FHD 3時間 処理 28時45分 → 14時24分 → ON 13時08分
短いのは誤差程度だけど、長尺は1時間強変わるとありがたい!
Jasna
FHD 21秒 処理 4分38秒 → 2分17秒 → ON 2分10秒
FHD 3時間 処理 28時45分 → 14時24分 → ON 13時08分
短いのは誤差程度だけど、長尺は1時間強変わるとありがたい!
名無しさん@お腹いっぱい。
返信 [1]
SBS HequirectからデュアルFisheyeへの変換はみんさんやっていたのですね。私は2種類の変換方法を1つのshellスクリプトに組み込んで動作モードやfov、エンコードなど指定するようにしていますが以下はパラメータは固定してあります。
まずは1つ目。
[SBS HequirectからFisheye]
ffmpeg -hwaccel cuda -threads 4 -i input.mp4 -filter_complex "[0:v]crop=w=iw/2:h=ih:x=0:y=0,crop=w=iw-4:h=ih-4:x=2:y=2,pad=w=in_w+4:h=in_h+4:x=2:y=2:color=black,v360=input=hequirect:output=fisheye:in_stereo=2d:out_stereo=2d:h_fov=180:v_fov=180[left]; [0:v]crop=w=iw/2:h=ih:x=iw/2:y=0,crop=w=iw-4:h=ih-4:x=2:y=2,pad=w=in_w+4:h=in_h+4:x=2:y=2:color=black,v360=input=hequirect:output=fisheye:in_stereo=2d:out_stereo=2d:h_fov=180:v_fov=180[right]; [left][right]hstack=inputs=2[v]" -map "[v]" -map 0:a? -c:v hevc_nvenc -preset p5 -cq 20 -c:a copy output.mp4
これでi7-14700K+5080でだいたい60fpsくらいの変換速度。
まずは1つ目。
[SBS HequirectからFisheye]
ffmpeg -hwaccel cuda -threads 4 -i input.mp4 -filter_complex "[0:v]crop=w=iw/2:h=ih:x=0:y=0,crop=w=iw-4:h=ih-4:x=2:y=2,pad=w=in_w+4:h=in_h+4:x=2:y=2:color=black,v360=input=hequirect:output=fisheye:in_stereo=2d:out_stereo=2d:h_fov=180:v_fov=180[left]; [0:v]crop=w=iw/2:h=ih:x=iw/2:y=0,crop=w=iw-4:h=ih-4:x=2:y=2,pad=w=in_w+4:h=in_h+4:x=2:y=2:color=black,v360=input=hequirect:output=fisheye:in_stereo=2d:out_stereo=2d:h_fov=180:v_fov=180[right]; [left][right]hstack=inputs=2[v]" -map "[v]" -map 0:a? -c:v hevc_nvenc -preset p5 -cq 20 -c:a copy output.mp4
これでi7-14700K+5080でだいたい60fpsくらいの変換速度。
名無しさん@お腹いっぱい。
返信 [1]
2つ目。
[SBS HequirectからStereographic 中央付近が伸びるのでここではアスペクトを0.96にしています]
ffmpeg -i input.mp4 -filter_complex "[0:v]split=2[left_src][right_src]; [left_src]crop=w=iw/2:h=ih:x=0:y=0,crop=w=iw-4:h=ih-4:x=2:y=2,pad=w=in_w+4:h=in_h+4:x=2:y=2:color=black,v360=input=hequirect:output=sg:in_stereo=2d:out_stereo=2d:h_fov=180:v_fov=180,scale=iw:trunc(ih*0.96/2)*2:flags=lanczos,pad=iw:ih/0.96:0:(ih/0.96-ih)/2:black[left_sg]; [right_src]crop=w=iw/2:h=ih:x=iw/2:y=0,crop=w=iw-4:h=ih-4:x=2:y=2,pad=w=in_w+4:h=in_h+4:x=2:y=2:color=black,v360=input=hequirect:output=sg:in_stereo=2d:out_stereo=2d:h_fov=180:v_fov=180,scale=iw:trunc(ih*0.96/2)*2:flags=lanczos,pad=iw:ih/0.96:0:(ih/0.96-ih)/2:black[right_sg]; [left_sg][right_sg]hstack=inputs=2[out]" -map "[out]" -map 0:a? -c:v hevc_nvenc -preset p5 -cq 20 -c:a copy output.mp4
これでi7-14700K+5080でだいたい18fpsくらいの速度。
v360のStereographic射影は全体印象としては変ですが動画によっては臨場感が凄いです。この状態でRTX PRO5000でltx良好画質、高速モード無し、重なりを減らすONで変換かけると4K動画なら実時間の6倍くらい。なぜか8Kも試した動画では同じくらいの時間。VRAM使用量ピークは4Kで24GBくらい、8Kで38GBくらい。5080では4KでもOOMが時々発生するので検出精度も含めて左右片面処理のほうが良さそう。
[SBS HequirectからStereographic 中央付近が伸びるのでここではアスペクトを0.96にしています]
ffmpeg -i input.mp4 -filter_complex "[0:v]split=2[left_src][right_src]; [left_src]crop=w=iw/2:h=ih:x=0:y=0,crop=w=iw-4:h=ih-4:x=2:y=2,pad=w=in_w+4:h=in_h+4:x=2:y=2:color=black,v360=input=hequirect:output=sg:in_stereo=2d:out_stereo=2d:h_fov=180:v_fov=180,scale=iw:trunc(ih*0.96/2)*2:flags=lanczos,pad=iw:ih/0.96:0:(ih/0.96-ih)/2:black[left_sg]; [right_src]crop=w=iw/2:h=ih:x=iw/2:y=0,crop=w=iw-4:h=ih-4:x=2:y=2,pad=w=in_w+4:h=in_h+4:x=2:y=2:color=black,v360=input=hequirect:output=sg:in_stereo=2d:out_stereo=2d:h_fov=180:v_fov=180,scale=iw:trunc(ih*0.96/2)*2:flags=lanczos,pad=iw:ih/0.96:0:(ih/0.96-ih)/2:black[right_sg]; [left_sg][right_sg]hstack=inputs=2[out]" -map "[out]" -map 0:a? -c:v hevc_nvenc -preset p5 -cq 20 -c:a copy output.mp4
これでi7-14700K+5080でだいたい18fpsくらいの速度。
v360のStereographic射影は全体印象としては変ですが動画によっては臨場感が凄いです。この状態でRTX PRO5000でltx良好画質、高速モード無し、重なりを減らすONで変換かけると4K動画なら実時間の6倍くらい。なぜか8Kも試した動画では同じくらいの時間。VRAM使用量ピークは4Kで24GBくらい、8Kで38GBくらい。5080では4KでもOOMが時々発生するので検出精度も含めて左右片面処理のほうが良さそう。
zelefansのGUIで分割魚眼化結合だけやってる
CEはなぜか動画がスムーズにならないので
通常のVRtoolを使う
CEはなぜか動画がスムーズにならないので
通常のVRtoolを使う
前スレのmacの質問のひと
このエラーは、ROI Refine のモデル選択で、pack のフォルダではなく、その中の blocks/group00.aimodel を選んでいると出ます。
仕組み: mioh は、選ばれたものが roi-refine-pack.json を持つフォルダなら ROI Refine の pack として扱います。単体の .aimodel ファイルを選ぶと、普通の Core ML の補正モデルとして読み込もうとします。
なぜ失敗するか: group00.aimodel は pack 用の Core AI 形式で、Core ML では読めません。そのため「Compile the model with Xcode…」というエラーで止まります。
直し方: 1つ上の、pack のフォルダそのものを選んでください。
~/Library/Application Support/mioh/ROIRefine/pack-sulphur-iclora1750-v5
選ぶときは blocks の中に入らず、pack-sulphur-iclora1750-v5 を選んだ状態で「開く」を押してください。
とAIが申しております。
このエラーは、ROI Refine のモデル選択で、pack のフォルダではなく、その中の blocks/group00.aimodel を選んでいると出ます。
仕組み: mioh は、選ばれたものが roi-refine-pack.json を持つフォルダなら ROI Refine の pack として扱います。単体の .aimodel ファイルを選ぶと、普通の Core ML の補正モデルとして読み込もうとします。
なぜ失敗するか: group00.aimodel は pack 用の Core AI 形式で、Core ML では読めません。そのため「Compile the model with Xcode…」というエラーで止まります。
直し方: 1つ上の、pack のフォルダそのものを選んでください。
~/Library/Application Support/mioh/ROIRefine/pack-sulphur-iclora1750-v5
選ぶときは blocks の中に入らず、pack-sulphur-iclora1750-v5 を選んだ状態で「開く」を押してください。
とAIが申しております。
名無しさん@お腹いっぱい。
v0.12.0は速くなるということだけど、
画質はどうなんだろ。上がるのかな?
画質はどうなんだろ。上がるのかな?
返信 [1]
>>19
なるほど!きちんとマニュアルに書いてありますね
>パックの保存先は、標準では~/Library/Application Support/mioh/ROIRefine/pack-sulphur-iclora1750-v5です。
>完了後は、表示されたパックフォルダを、miohの「復元」→「ROIエンハンサー」→「ROI Refine」のモデル選択で指定します。
読み間違えました
欠陥(毛感w)含め、どんな仕上がりになるのかやってみます
なるほど!きちんとマニュアルに書いてありますね
>パックの保存先は、標準では~/Library/Application Support/mioh/ROIRefine/pack-sulphur-iclora1750-v5です。
>完了後は、表示されたパックフォルダを、miohの「復元」→「ROIエンハンサー」→「ROI Refine」のモデル選択で指定します。
読み間違えました
欠陥(毛感w)含め、どんな仕上がりになるのかやってみます
名無しさん@お腹いっぱい。
そんな事より早くクラウドGPUライセンスをだな…
v0.12.0がもうすぐ出るということで
0.11.3での変換中止したw
0.11.3での変換中止したw
返信 [1]
5060Ti 16GB にしたら8KVRが処理できるかと思ったけど、
開始したらすぐスキップって表示されて止まっちゃう
どこかを設定したらできますか?
開始したらすぐスキップって表示されて止まっちゃう
どこかを設定したらできますか?
名無しさん@お腹いっぱい。
>>27
LTXの場合だったら詳細設定のVR180モードをOFFにしないといけない。自動にしておいてもVRと判断された途端蹴られてしまう。
LTXの場合だったら詳細設定のVR180モードをOFFにしないといけない。自動にしておいてもVRと判断された途端蹴られてしまう。
あ、ほんとだ動きました
ありがとうございますm(_ _)m
ありがとうございますm(_ _)m
返信 [1]
VR SBS動画をPCで見て端のほうが台形ぽく歪んでるのがfisheyeってことでいい? で歪み方の程度に応じて先に補正をかけようっていう段階に取り組んでる?
名無しさん@お腹いっぱい。
動画のレイアウト、射影・投影方法、モザイクを掛ける対象をそれぞれ分けて認識すると良いでしょう。
レイアウトはSBSやTB等がある。射影・投影はEquirect(360)、Hequirect(180)、fisheye等がある。
Equirectは地球をメルカトル図法の地図で表したような感じで端は歪む。レイアウトとしては片目で縦横比2:1の横長てありTBでつかわれる。
Hequirectは地球一周ではなく半分の180度で同じく端は歪む。片目で正方形のSBS映像、これが紳士の一般的動画。
Fisheyeは全天カメラ映像のように丸い視野の映像で撮影方式でもあり投影方式でもあり、レイアウトでもある。SBSのように◯◯と横並びのものをDualFisheyeと呼ぶが、単にFisheyeと呼ばれるのは紳士の世界では大抵この黒背景に◯◯視野のものを指す。
同じSBSでもモザイクは球面空間で矩形で掛けるとメルカトル図法のように2Dで見た時に端が台形みたいになる。2Dに投影された状態でモザ掛けると2D Playerで見た時にモザは矩形のままに見える。
けどいくらモザが矩形でも映像自体が歪んでるとまともな復元映像になりにくい。
こういうことだと思う。たぶんきっと。
レイアウトはSBSやTB等がある。射影・投影はEquirect(360)、Hequirect(180)、fisheye等がある。
Equirectは地球をメルカトル図法の地図で表したような感じで端は歪む。レイアウトとしては片目で縦横比2:1の横長てありTBでつかわれる。
Hequirectは地球一周ではなく半分の180度で同じく端は歪む。片目で正方形のSBS映像、これが紳士の一般的動画。
Fisheyeは全天カメラ映像のように丸い視野の映像で撮影方式でもあり投影方式でもあり、レイアウトでもある。SBSのように◯◯と横並びのものをDualFisheyeと呼ぶが、単にFisheyeと呼ばれるのは紳士の世界では大抵この黒背景に◯◯視野のものを指す。
同じSBSでもモザイクは球面空間で矩形で掛けるとメルカトル図法のように2Dで見た時に端が台形みたいになる。2Dに投影された状態でモザ掛けると2D Playerで見た時にモザは矩形のままに見える。
けどいくらモザが矩形でも映像自体が歪んでるとまともな復元映像になりにくい。
こういうことだと思う。たぶんきっと。
名無しさん@お腹いっぱい。
魚眼レンズで撮ったわんこはかわええ
魚眼変換すると良い作品をここでは単に魚眼、fisheyeと呼んでいるだけかと
魚眼で撮影してモ処理を行ってから引き延ばした作品(外周モが台形状になる)は
魚眼への変換をしてやれば本来の撮影動画にモをかけただけの状態に戻るから綺麗な復元が期待できる
魚眼で撮影してモ処理を行ってから引き延ばした作品(外周モが台形状になる)は
魚眼への変換をしてやれば本来の撮影動画にモをかけただけの状態に戻るから綺麗な復元が期待できる
名無しさん@お腹いっぱい。
魚眼変換って出来るんですか?
名無しさん@お腹いっぱい。
現在主流のSBS(SIDE BY SIDE)正距円筒図法のVR180動画では、
キヤノンのEOS VR SYSTEMなどVR180カメラで撮影したdual fisheye(見た目[〇〇])の時点でモザイクをかけ、モザイクごと正距円筒図法に変換したものを「魚眼(fisheye)」と呼んでいる
この場合、モザイクの形は中央部分は□のままだが、周辺部に行くに従って縦横の枠が斜めになる(被写体も同様に拡大される)
一方、dual fisheyeを正距円筒図法に変換した後でモザイクをかけたものは、モザイクは変換されないので□のままになり「魚眼」ではないことになる
ただし、最近、1つの動画ファイル中でこの両方が混在しているVR動画も存在するのでやっかいである
キヤノンのEOS VR SYSTEMなどVR180カメラで撮影したdual fisheye(見た目[〇〇])の時点でモザイクをかけ、モザイクごと正距円筒図法に変換したものを「魚眼(fisheye)」と呼んでいる
この場合、モザイクの形は中央部分は□のままだが、周辺部に行くに従って縦横の枠が斜めになる(被写体も同様に拡大される)
一方、dual fisheyeを正距円筒図法に変換した後でモザイクをかけたものは、モザイクは変換されないので□のままになり「魚眼」ではないことになる
ただし、最近、1つの動画ファイル中でこの両方が混在しているVR動画も存在するのでやっかいである
名無しさん@お腹いっぱい。
返信 [1]
「魚眼(fisheye)」からdual fisheye(見た目[〇〇])へ戻すツールはありますか?
名無しさん@お腹いっぱい。
>>16が変換パラメータのようですね。
ありがとうございます。
ありがとうございます。
名無しさん@お腹いっぱい。
名無しさん@お腹いっぱい。
>>17 は問題ありのバージョンを貼ってしまっていました。2倍にアプスケしてしまいます。等倍のstereographic版は以下のコマンドです。
ffmpeg -i input.mp4 -filter_complex "[0:v]split=3[left_src][right_src][ref]; [left_src]crop=w=iw/2:h=ih:x=0:y=0,crop=w=iw-4:h=ih-4:x=2:y=2,pad=w=in_w+4:h=in_h+4:x=2:y=2:color=black,v360=input=hequirect:output=sg:in_stereo=2d:out_stereo=2d:h_fov=180:v_fov=180,scale=iw:trunc(ih*0.96/2)*2:flags=lanczos,pad=iw:ih/0.96:0:(ih/0.96-ih)/2:black[left_sg]; [right_src]crop=w=iw/2:h=ih:x=iw/2:y=0,crop=w=iw-4:h=ih-4:x=2:y=2,pad=w=in_w+4:h=in_h+4:x=2:y=2:color=black,v360=input=hequirect:output=sg:in_stereo=2d:out_stereo=2d:h_fov=180:v_fov=180,scale=iw:trunc(ih*0.96/2)*2:flags=lanczos,pad=iw:ih/0.96:0:(ih/0.96-ih)/2:black[right_sg]; [left_sg][right_sg]hstack=inputs=2[sg]; [sg][ref]scale=w=rw:h=rh:flags=lanczos[out]" -map "[out]" -map 0:a? -c:v hevc_nvenc -preset p5 -cq 20 -c:a copy output.mp4
ffmpeg -i input.mp4 -filter_complex "[0:v]split=3[left_src][right_src][ref]; [left_src]crop=w=iw/2:h=ih:x=0:y=0,crop=w=iw-4:h=ih-4:x=2:y=2,pad=w=in_w+4:h=in_h+4:x=2:y=2:color=black,v360=input=hequirect:output=sg:in_stereo=2d:out_stereo=2d:h_fov=180:v_fov=180,scale=iw:trunc(ih*0.96/2)*2:flags=lanczos,pad=iw:ih/0.96:0:(ih/0.96-ih)/2:black[left_sg]; [right_src]crop=w=iw/2:h=ih:x=iw/2:y=0,crop=w=iw-4:h=ih-4:x=2:y=2,pad=w=in_w+4:h=in_h+4:x=2:y=2:color=black,v360=input=hequirect:output=sg:in_stereo=2d:out_stereo=2d:h_fov=180:v_fov=180,scale=iw:trunc(ih*0.96/2)*2:flags=lanczos,pad=iw:ih/0.96:0:(ih/0.96-ih)/2:black[right_sg]; [left_sg][right_sg]hstack=inputs=2[sg]; [sg][ref]scale=w=rw:h=rh:flags=lanczos[out]" -map "[out]" -map 0:a? -c:v hevc_nvenc -preset p5 -cq 20 -c:a copy output.mp4
名無しさん@お腹いっぱい。
ffmpegってそんなややこしいことまでコマンドで出来るのか。すごいな。
input.mp4 のところは自分のお目当てのものにしなきゃいけない、くらいしか分からん
>>37
https://codeberg.org/zelefans/vr_remove_mosaic
GUIならzelefansのVR Video ToolboxのVR split/combine tools
https://codeberg.org/zelefans/vr_remove_mosaic
GUIならzelefansのVR Video ToolboxのVR split/combine tools
名無しさん@お腹いっぱい。
>>42
なるほど、そういう手もあるのか。さんきゅー。
なるほど、そういう手もあるのか。さんきゅー。
返信 [1]
返信 [1]
返信 [1]
>>47
自宅PCのローカルリポジトリで処理させたので、外出先の今は詳細分からないが
やりたいことを箇条書きにして、「ffmpegのフロントエンドGUI作って」と投げた
自分の場合はよく使う機能 アスペクト比、コンテナ変更、部分切り出し、再エンコの有無 等々、その他お勧めの機能も加えてと書いただけ。
とりあえず作らせて自分が使いやすいように追加、修正させればよいのでは
自宅PCのローカルリポジトリで処理させたので、外出先の今は詳細分からないが
やりたいことを箇条書きにして、「ffmpegのフロントエンドGUI作って」と投げた
自分の場合はよく使う機能 アスペクト比、コンテナ変更、部分切り出し、再エンコの有無 等々、その他お勧めの機能も加えてと書いただけ。
とりあえず作らせて自分が使いやすいように追加、修正させればよいのでは
返信 [1]
他の有料AIは知らないけども
ClaudeCodeさんは対話だけでほぼ思ったの作ってくれるから楽でいいわね
詳しく書けないけどもキャプチャアプリケーションも作ってくれた
要望に余計な事を言わないのがコツ、あとは察して
ClaudeCodeさんは対話だけでほぼ思ったの作ってくれるから楽でいいわね
詳しく書けないけどもキャプチャアプリケーションも作ってくれた
要望に余計な事を言わないのがコツ、あとは察して
作った、出来ただけの日記ならXでやれよ
情報として無価値
情報として無価値
名無しさん@お腹いっぱい。
は?ナイスジョーク!
>>49
GITHUB Copilotでも出来たよ
GITHUB Copilotでも出来たよ
LTXでの処理後の動画、半分くらいが途中から見れない状態になるんだけど似たような症状のある人いますか?
止まる場所は動画によって様々で、開始5分で止まるのもあれば1時間50分まで見れるのもあります。止まる部分より後はシークバーでずらしてもサムネイルも生成されないし、MPCBEとVLC、win11標準プレイヤーのどれでも同じです。
エンコードのときのタイムスタンプずれな気がするけど、jasna上ではエラーもでないしどう解消したものか…
止まる場所は動画によって様々で、開始5分で止まるのもあれば1時間50分まで見れるのもあります。止まる部分より後はシークバーでずらしてもサムネイルも生成されないし、MPCBEとVLC、win11標準プレイヤーのどれでも同じです。
エンコードのときのタイムスタンプずれな気がするけど、jasna上ではエラーもでないしどう解消したものか…
名無しさん@お腹いっぱい。
返信 [1]
LTXを使ったjasnaの設定で最適な条件は何がいいですか?
名無しさん@お腹いっぱい。
返信 [1]
まずはffprobe等でdurationの時間とstreamの時間確認してみては?
メタデータのduration通りの時間のデータが入っていないのか、入っているけど途中で壊れているのか見当つくと思う。
LTXのステップ4で落ちると例えば1分の動画なのに10秒しか入っていなものが出来上がったりする。この場合はログ遡ると表示されてるけど。
メタデータのduration通りの時間のデータが入っていないのか、入っているけど途中で壊れているのか見当つくと思う。
LTXのステップ4で落ちると例えば1分の動画なのに10秒しか入っていなものが出来上がったりする。この場合はログ遡ると表示されてるけど。
>>54
動画による
動画による
中古の4060ti 16GBポチッた。今の俺にはこれが精一杯。
お前らはストレージもすごそうだな。
動画だけで100TBなんて普通の世界?
お前らはストレージもすごそうだな。
動画だけで100TBなんて普通の世界?
返信 [1]
>>53
元動画の形式とか、Segment Editorで分割処理したのかとか、どうjasnaで処理したのか情報も無いとなんとも言えないな
元動画の形式とか、Segment Editorで分割処理したのかとか、どうjasnaで処理したのか情報も無いとなんとも言えないな
名無しさん@お腹いっぱい。
増設を考えてAmazon見たけど、SSDだけじゃなくHDDも値上がりしてるなぁ…
名無しさん@お腹いっぱい。
元動画は消さないが、LTX以外で破壊した動画は消すようにしてる。
名無しさん@お腹いっぱい。
>>57
うちは多分来年には100テラ超えちゃいそう
うちは多分来年には100テラ超えちゃいそう
5060Ti 16GB で 8K VRの動画破壊できました!
4060Ti 8Gは途中でエラーで止まってたんで、うれしい!
でもVRAMが95%で15GBくらい使ってて、
マウスカーソルの動きにカクツキがでるくらいでギリギリでしたW
4060Ti 8Gは途中でエラーで止まってたんで、うれしい!
でもVRAMが95%で15GBくらい使ってて、
マウスカーソルの動きにカクツキがでるくらいでギリギリでしたW
返信 [1]
名無しさん@お腹いっぱい。
返信 [1]
>>63
先ずは途中までしか再生できないとは何なのかを確認してみては?
ffmpeg -i input.mp4 -c copy -shortest output.mp4
これで実際の動画の映像か音声か最も短いものに合わせて出力される。
jasnaで出力した動画を変換してみて動画時間に差があったら途中までしか動画が作成されていないことになる。ほぼ時間が同じなら何かエラーになるものが含まれてる。
先ずは途中までしか再生できないとは何なのかを確認してみては?
ffmpeg -i input.mp4 -c copy -shortest output.mp4
これで実際の動画の映像か音声か最も短いものに合わせて出力される。
jasnaで出力した動画を変換してみて動画時間に差があったら途中までしか動画が作成されていないことになる。ほぼ時間が同じなら何かエラーになるものが含まれてる。
名無しさん@お腹いっぱい。
名無しさん@お腹いっぱい。
去年の今頃、「主にAI用途でしか使わんしSUPERまで待つか」と思っていたけど、情勢鑑みたらSUPER出ないっぽくね?それどころか既製品も値上がりする?と思ってパーツ更新に走った、結果的にグラボはほぼ底で拾えた
CPUやマザボはまだしもグラボ、メモリのどっちか逝ったら致命的
CPUやマザボはまだしもグラボ、メモリのどっちか逝ったら致命的
>>64
コマンドそのままで実行したところ、時間も同じで同じ所までしか再生できない動画が生まれました
AIに言われた通り色々オプションつけてみたら見れる部分だけの短い動画ファイルになったので、他の方が言うように元動画を再エンコしてやってみます
コマンドそのままで実行したところ、時間も同じで同じ所までしか再生できない動画が生まれました
AIに言われた通り色々オプションつけてみたら見れる部分だけの短い動画ファイルになったので、他の方が言うように元動画を再エンコしてやってみます
>>65
ありがとうございます。試してみます。
ありがとうございます。試してみます。
AIlバブルがはじければ、下がるんじゃね?バブルはじけるのもそんなにさきじゃないでしょ
名無しさん@お腹いっぱい。
ここにいる連中みたいにエロいやつが多いと中々弾けんぞ
>>48
AIに聞いてH265変換+結合位しかやってないけどチャレンジしてみるよ。どうもありがとう
AIに聞いてH265変換+結合位しかやってないけどチャレンジしてみるよ。どうもありがとう
名無しさん@お腹いっぱい。
4060VRAM-8G,DDR5-16G,jasna0.11.3,LTX標準
入力 0720*0480,60fps,01:36:36 処理時間 23:47:53
入力 1920*1080,60fps,00:34:16 処理時間 07:17:37
SDとFHDで処理時間あまり変わらんっぽいな
それにしてもすごい再現性だ、もう流出や無修正って言われてもわからん
入力 0720*0480,60fps,01:36:36 処理時間 23:47:53
入力 1920*1080,60fps,00:34:16 処理時間 07:17:37
SDとFHDで処理時間あまり変わらんっぽいな
それにしてもすごい再現性だ、もう流出や無修正って言われてもわからん
AIは今が本当の意味での黎明期
JASNA の BasicVSR++, rfdetr-v6 で処理すると、ブルブル震えるような動きの動画が出来上がってしまうのですが
どうしたらいいか分かりますでしょうか?
どうしたらいいか分かりますでしょうか?
>>75
YOLOの方が検出力が高いが、画面上のチェック状の背景や服などにも反応して余計なところが崩れる場合がある
RF-DETRは顔モザイクは無視し背景や服の誤検出は無いが、肝心なところの検出漏れの場合がある
じゃないかな
YOLOの方が検出力が高いが、画面上のチェック状の背景や服などにも反応して余計なところが崩れる場合がある
RF-DETRは顔モザイクは無視し背景や服の誤検出は無いが、肝心なところの検出漏れの場合がある
じゃないかな
>>78
LTXで処理する
LTXで処理する
>>78
動画の細かいフォーマットが原因みたいだから自分はHandbrakeで再エンコしてから復元処理してる
動画の細かいフォーマットが原因みたいだから自分はHandbrakeで再エンコしてから復元処理してる
返信 [1]
名無しさん@お腹いっぱい。
>>82
アドバイスありがとうございます。
lada_vr_mosaic_detection_model_v2_accurate.pt をダウンロードしてそのままmodel_weightsフォルダに入れたら使える
でOKでしょうか?
アドバイスありがとうございます。
lada_vr_mosaic_detection_model_v2_accurate.pt をダウンロードしてそのままmodel_weightsフォルダに入れたら使える
でOKでしょうか?
返信 [1]
そう、検出モデルにzelefans-vr-yolo-v2が出て選べるようになる
名無しさん@お腹いっぱい。
名無しさん@お腹いっぱい。
返信 [1]
LTXはとにかく時間がかかるので、処理対象動画をブツ切りにしてから破壊することにしたのだが、
ブツ切りするのに色んなアプリを試してもとにかく時間が溶ける。
そこで試しに claude(無課金)に頼んで ffmpeg のGUIを作ってくれって頼んだら、めちゃ快適。
ご参考までにプロンプト貼っとくわ。↓
ブツ切りするのに色んなアプリを試してもとにかく時間が溶ける。
そこで試しに claude(無課金)に頼んで ffmpeg のGUIを作ってくれって頼んだら、めちゃ快適。
ご参考までにプロンプト貼っとくわ。↓
>>86 つづき 以下プロンプト
-----------------------------
以下機能の ffmpeg のGUIを作って下さい。
添付の cut.txt に予めユーザーが以下を記入しておくこととします。
最初の行に切断対象の動画のファイル名。
3行目以下に動画を切断する位置、行数は任意で、必ず 00:00:00 で始まり、EE:EE:EE で終わることとし、その間に切断する箇所を HH:MM:SS の記述で最大998行までとします。
GUIには「CUT」「STOP」というボタンと、「FIN」「ERROR」というランプを付けて下さい。
「CUT」を押したら cut.txt で指定された動画を指定の区切り位置で複数の動画ファイルに分割、各々のファイル名には元動画のファイル名を****.mp4であれば****_001.mp4、****_002.mp4、****_003.mp4 ・・・という風に通し番号を付加します。
動画切断位置を示す行に - が入っている場合、その区間の動画は生成しないようにして下さい。
切断が終わったら「FIN」ランプを点灯、切断箇所のどれかが元動画の長さよりも長い場合と、切断箇所記載箇所の行数が998行を超えている場合は切断動作せず「ERROR」ランプを点灯するようにして下さい。
-----------------------------
以下機能の ffmpeg のGUIを作って下さい。
添付の cut.txt に予めユーザーが以下を記入しておくこととします。
最初の行に切断対象の動画のファイル名。
3行目以下に動画を切断する位置、行数は任意で、必ず 00:00:00 で始まり、EE:EE:EE で終わることとし、その間に切断する箇所を HH:MM:SS の記述で最大998行までとします。
GUIには「CUT」「STOP」というボタンと、「FIN」「ERROR」というランプを付けて下さい。
「CUT」を押したら cut.txt で指定された動画を指定の区切り位置で複数の動画ファイルに分割、各々のファイル名には元動画のファイル名を****.mp4であれば****_001.mp4、****_002.mp4、****_003.mp4 ・・・という風に通し番号を付加します。
動画切断位置を示す行に - が入っている場合、その区間の動画は生成しないようにして下さい。
切断が終わったら「FIN」ランプを点灯、切断箇所のどれかが元動画の長さよりも長い場合と、切断箇所記載箇所の行数が998行を超えている場合は切断動作せず「ERROR」ランプを点灯するようにして下さい。
名無しさん@お腹いっぱい。
>>87 さらに続き 頼む時にくっつける cut.txt のサンプルファイル中身
----------------------------------
D:\EXAMPLE\****.MP4
00:00:00
-
02:05:00
02:19:25
02:32:22
-
EE:EE:EE
----------------------------------
D:\EXAMPLE\****.MP4
00:00:00
-
02:05:00
02:19:25
02:32:22
-
EE:EE:EE
名無しさん@お腹いっぱい。
>>87 プロンプトで書き忘れてた。
--------------------
「CUT」を押した後の動画の切り出し動作中に「STOP」を押したら、切り出し動作を停止して下さい。
そこまでに生成した切断後の動画はそのままにして下さい。
--------------------
そのままじゃなくて全部消しちゃう方がよかったらそう書くとええし、アレンジはご自由に。
実際は切り出し動作が数秒で終わるので、「STOP」押すスキはまず無いですw
--------------------
「CUT」を押した後の動画の切り出し動作中に「STOP」を押したら、切り出し動作を停止して下さい。
そこまでに生成した切断後の動画はそのままにして下さい。
--------------------
そのままじゃなくて全部消しちゃう方がよかったらそう書くとええし、アレンジはご自由に。
実際は切り出し動作が数秒で終わるので、「STOP」押すスキはまず無いですw
名無しさん@お腹いっぱい。
ただ単にぶつ切りにしたいならDDで勝手にキーフレームで5分割なり20分毎なりするBATでも書いてもらった方が早いんじゃないか。
動画確認しながらカットしたいならロスレスでカット位置自分で決めて分割カすれば良いし。
動画確認しながらカットしたいならロスレスでカット位置自分で決めて分割カすれば良いし。
名無しさん@お腹いっぱい。
モザイクの処理する必要のないとこ切り出して、
必要なとこだけ処理してあとで合体するってことじゃないすか?
どこまで処理の必要のないとこ切り出すかで数が多かったら余計手間そうだけど、
日本のは前半にドラマ仕立てで処理の必要がないのが多いから、
そこだけ切り取るってぐらいならいいかもしれないね
必要なとこだけ処理してあとで合体するってことじゃないすか?
どこまで処理の必要のないとこ切り出すかで数が多かったら余計手間そうだけど、
日本のは前半にドラマ仕立てで処理の必要がないのが多いから、
そこだけ切り取るってぐらいならいいかもしれないね
名無しさん@お腹いっぱい。
コーヒー代決済できない
VISAもJCBもmasterもダメ
なんか障害出てる?
VISAもJCBもmasterもダメ
なんか障害出てる?
モザイク無いとこが多いと処理がめっちゃ速いから、カット編集もそんなに凝らなくて良いと思う
オムニバス作品は一人ごとに区切るとか、単体女優ものはシーンごとに区切る程度でも、それぞれのファイルが数時間で終わるから、途中でGPU他のことに使いたいとかのときも中断がしやすい
オムニバス作品は一人ごとに区切るとか、単体女優ものはシーンごとに区切る程度でも、それぞれのファイルが数時間で終わるから、途中でGPU他のことに使いたいとかのときも中断がしやすい
名無しさん@お腹いっぱい。
返信 [1]
次のバージョンは一時停止ができるって話ありませんでした?
名無しさん@お腹いっぱい。
>>94 あるよ
Jasna v0.12.0 がもうすぐ出そうと思ったけど、なかなか出ないw AMD版のデバッグに手こずってるのかな?
前スレ >>968 再掲
レポジトリのバージョン表記が 0.12.0 に上がり、1 週間で 200 件超のコミット、正式版では変わる可能性あり
■ 新機能
・LTX の一時停止と再開、範囲指定ジョブも対象
・LTX 高速化(コミット名は「2 倍速 VAE と 3 倍速 stream-distilled」非公開部分のため詳細不明)
モデルファイルが再ダウンロードされるので 0.11.3 からの流用は更新が必要、ライセンスはそのまま
(HFには既に新しいモデルファイルがアップロードされてる)
・LTX が 6 GB カードで動く、RTX 20 系は VAE fp16 化で大幅高速化
・AMD: Linux の RX 7000/9000・R9700 で LTX 対応、Windows はベータ、ROCm 10.1 に更新
■ バグ修正
・LTX のウィンドウの継ぎ目で先頭数フレームが灰色にちらつく(#580)
・範囲指定で LUT とシャープ化が復元区間にしか効かない(#551)
・範囲指定で元コーデックが違うと AV1 設定のせいで失敗(#569)
・スマートレンダーで継ぎ目ごとに音声が約 1 GOP ずれる(#595, #548)
・GOP 途中カットの MP4 で先頭・末尾フレーム欠落
・処理スレッドが落ちたときのハング
・ストリーミングの先読みが数分で 0 になる(#579)
Jasna v0.12.0 がもうすぐ出そうと思ったけど、なかなか出ないw AMD版のデバッグに手こずってるのかな?
前スレ >>968 再掲
レポジトリのバージョン表記が 0.12.0 に上がり、1 週間で 200 件超のコミット、正式版では変わる可能性あり
■ 新機能
・LTX の一時停止と再開、範囲指定ジョブも対象
・LTX 高速化(コミット名は「2 倍速 VAE と 3 倍速 stream-distilled」非公開部分のため詳細不明)
モデルファイルが再ダウンロードされるので 0.11.3 からの流用は更新が必要、ライセンスはそのまま
(HFには既に新しいモデルファイルがアップロードされてる)
・LTX が 6 GB カードで動く、RTX 20 系は VAE fp16 化で大幅高速化
・AMD: Linux の RX 7000/9000・R9700 で LTX 対応、Windows はベータ、ROCm 10.1 に更新
■ バグ修正
・LTX のウィンドウの継ぎ目で先頭数フレームが灰色にちらつく(#580)
・範囲指定で LUT とシャープ化が復元区間にしか効かない(#551)
・範囲指定で元コーデックが違うと AV1 設定のせいで失敗(#569)
・スマートレンダーで継ぎ目ごとに音声が約 1 GOP ずれる(#595, #548)
・GOP 途中カットの MP4 で先頭・末尾フレーム欠落
・処理スレッドが落ちたときのハング
・ストリーミングの先読みが数分で 0 になる(#579)
名無しさん@お腹いっぱい。
返信 [1]
GPUフル稼働で外出するの怖いから中断・再開が出来るようになったら3時間ものでも気軽に破壊できるようになるな
>>96
電気代の方が怖いけどな
電気代の方が怖いけどな
夢中でモザイク外してる香具師にもまたサナエ電気代補助金が注ぎ込まれると思うとなんかアレやねw
名無しさん@お腹いっぱい。
現在一強であることにあぐらをかいてサブスク化したりどんどん値上げをするTopazに対してAIアップスケール部門でも革命起こして欲しいな
名無しさん@お腹いっぱい。
返信 [1]
最近はメインPCがJasnaで塞がってるのでサブPCでTVAIの代わりにReal Video Enhancer使ってる。TVAIのIris等には劣るがまぁこれで良いか位には仕上がる。
レスを投稿する
ニュース
- 日経平均株価 一時2500円以上下落 [少考さん★]
- 【本】「中国籍・○○容疑者」を見ただけで「日本人vs.中国人」の構図が生まれる…人が無意識に陥る心の枠組み [少考さん★]
- キオクシア株急落、投資した高校生も「忍耐力」学ぶ [Gecko★]
- 【速報】コメ類、過去最大29.7%下落 [蚤の市★]
- 「G7で日本だけ、同性カップルの法的保障がない」…岩屋毅前外相「理解と支持が広がるように努力」 [少考さん★]
- 【速報】米中露、「平和宣言」発表 ★4 [Hitzeschleier★]
- 元防災大臣「高市総理の勝ち。10秒間も習近平の手を握り続けた。これはすごいこと。これが外交。(原文ママ)」 [197015205]
- 日本全国、大雪 [667744927]
- 【訃報】日経平均逝く 、ガチマヂマンデー [943688309]
- ガンダムって足いらなくね? [422186189]
- 【悲報】フルローンで2億の都心タワマン買っちゃった子持ち夫婦、大暴落して発狂「毎晩嘔吐。夜も眠れない」wwwwwwwwwwww [732289945]
- 海外大手メディア「APECで孤立する高市早苗」 [465483804]