5ちゃんねる⇒ソフトウェア@5ch掲示板
設定
ダークモード
広告表示
画像・外部リンク

UPLIFT会員は外部リンクへ直接移動します。確認は初期設定でオンです。

機能のオン・オフ

このブラウザ・このサーバーのみ。オフにしても保存済みデータは残ります。

UPLIFT

1002コメント309KB

【質問】dfl【その3】

■ このスレッドは過去ログ倉庫に格納されています
垢版
返信 [1]
DeepFaceLab(以下、DFL)の質問&回答スレです

・質問について
日進月歩、モデルやオプションが多様化しているにもかかわらず、局所的な意見が散見されます。
必要に応じて自分の使ってるソフトやモデル、パラメータ等の詳細も書きましょう。

・エラーについて
エラーが出て解決できない場合は、なるべく詳細な情報(環境やどうしてそうなったか)を書きましょう。
特にエラー文は1番のヒントです。ググれば解決することも多いです。自分で解決できない場合はログを全文コピペしましょう。

・ソフトはどれ使えばいい?
利用者が多く情報が多いのはDFL。FSも英語圏では情報が得やすい。他は更新していない。

・必要スペックは?
VRAM容量6GB〜が推奨スペック。GPU性能は高い程いい。

・RTXシリーズでも動くの?
FS、DFL共に動く。
垢版
ずっと古いdfl使ってた初心者なんですけど、最近のバージョンってtrain遅くなったけど精度は上がってたりします?
めちゃくちゃ数こなすの遅くなってて
垢版
train速くなって精度は変わってないと思う
垢版
え、速くなってるんですか
垢版
Colabの方で超解像化してそのままぶち込んでもDFLファイル見つからんて言われるね。再extractかければいいだけだが
垢版
4.2) data_src util faceset metadata save.bat
4.2) data_src util faceset metadata restore.bat

もっとこのファイルは評価されるべき
元画像まとめてsaveしてgpen画像と交換してrestoreするだけよ
垢版
gpenやっと導入できた
すごいなこれ
垢版
返信 [1]
RTX2080Ti用って1080Tiでも動くんだな
バッチを倍にしても起動するし学習早くなった
垢版
返信 [2]
gpenて何に使ってるの?
垢版
>>685
up to 2080tiやぞそれ以前のは使える

>>686
src強化
元動画の画質が多少粗くても使えるようになる
ただたまに化け物生成されるから出力されたのは全数目視検査した方がいい
垢版
なるほどありがとう
垢版
既出かもしれんが、headshotってソフト知ってる?使いようによってはsrc不足を補えるかも。
垢版
>>686
ぼやけた画像を高画質化、高精細化する。
かなりいいぞ。
頑張って導入してみ。
垢版
google colaboのGPEN使うとすぐGPU使用量の上限に当たって使えなくならない?
垢版
自分のローカルPC(2070s)環境上でGPENを動かす事はできるのでしょうか?
垢版
できるけど
Winじゃ動作しなかったからdebianインストールして動かしたよ
垢版
返信 [1]
あら〜面倒くさいんですね、じゃすなおにColabでやります。
サンクスです。
垢版
>>694
試したのはWinのAnaconda環境ね
wsl2はGPU対応ビルドがWin11のみになっちゃったので未確認です
垢版
自分の顔が杉浦ぼっ樹にジャストフィットすると解り
葵つかさや紗倉まなとの共演を果たしてしまう>>1
垢版
返信 [1]
普通にmergeして作成したフルHD解像度のpngやjpgをColabのGPENで高精細化しようとしたらダメだった
代わりにpngから更にheadモード1024で顔抽出したやつなら変換できたので、mergeのソースを弄ってpngの顔抽出元に上書きできるようにした
画面いっぱいの大きな顔でもなかなかな解像感でてる
まだ動画の連続したコマで処理、再動画化は試してないので最終的にチラつき等出ないかはわからない
垢版
明日の日記もお楽しみに
垢版
返信 [1]
>>697
まさにmerge画像を更に超解像できたらクオリティもっと上げられると思ってたからありがたい
mergeのソースはどこいじればgpen画像と交換できるん?
垢版
趣味系の板でこういう高齢者増えたな
垢版
返信 [1]
Xsegの仕組みを応用して自動顔抽出したがいけてないランドマークを補正する機能は作れないのかな?
pretrainのfacesetに設定されているだろう正確なランドマークを学習させて
垢版
返信 [1]
>>699
ソースの変更箇所を画像にしてみましたので参考になれば
修正箇所はおおまかに以下の4箇所です

1段目・・・FrameInfo.py __init__()
2段目・・・Merger.py main()
3段目・・・MergeMasked.py MergeMasked()
4段目・・・MergeMasked.py MergeMaskedFace()

https://i.imgur.com/C4KSm8G.jpg
垢版
返信 [1]
>>702
優しすぎて泣ける
変更点と解説まで分かりやすく作っていただいてありがとうございます!
息子も大喜びです
垢版
返信 [1]
>>701
3060で顔抽出2重起動しても3it/sくらいだからもっと早くしたいけど
Xseg応用してどのくらいの速度で抽出できてる?
DFLと連携してるMachine Video Editor使えば
ランドマークの自動配置に加えて手動で1点ずつ動かせるから
その抽出方法でも活かせたら強いな
垢版
返信 [2]
>>703
ソース改造後の使い方などを書いてみましたのでご一読下さい
ソース改造後は通常のマージ機能が使えなくなるので作業フォルダを分ける必要があります

https://i.imgur.com/xSvYBRG.jpg
垢版
返信 [1]
>>705
もはや課金したいレベル
見ないと詰まりそうなポイント多いのでめちゃくちゃ助かります!
垢版
>>706
自分はまだ連続コマでの再動画化は試せてないので、GPEN側の精度によってはチラつきで視聴に耐えられないかもしれません
その場合は静止画スライドショーで楽しんで下さいw

あと、1回目の通常マージではsuper resolutionはかけない方が良いですね
GPENで再度高精細化すると前歯に縦線が入ったり副作用が出やすいですね
垢版
数コマでも更に高品質なシーンが作れるだけで十分なのでノーダメージですw
全部踏まえて修行してみます
垢版
返信 [1]
>>704
Xseg応用しての顔抽出っては自分にとってはまだ夢物語でこれからソースコード勉強してみようかっていう段階です
できれば公式さんにそういうの作って欲しい

Machine Video Editorっていうのがあるんですね、調べてみます
垢版
>>709
なるほどね
他の顔識別AIを応用すれば動画のまま1フレーム毎に顔認識させて
10倍くらい早くできるみたいだから公式で作ってほしいけど
開発者の対応見てると作る気無さそう

MVEはmrとyoutubeにガイドがあるから参考にしてみて
垢版
返信 [1]
>697
debianのローカル環境でやってみたらmerge画像は直接変換できたよ

確かに綺麗にはなるんだけど、動画にすると若干チラつき感はありますね
垢版
返信 [1]
>>711
Colabのメイン部分(jappさん作?)をよく確認したらDFLで顔抽出した以外の画像は変換対象外にしていましたね
このチェック部分を上手くコメントアウトすればColabでもmerge後のフレーム画像をそのままGPENを掛けられるかもですね

自分もようやく改造ソースで連続コマを再動画化(GPEN適用は1万6千枚)が出来ましたが、通常の顔サイズなら目立ったチラつきはありませんでした
一番印象が変わる前髪や眉毛もチリチリするようなことはなし

ただ画面縦の6割以上な顔アップで動きが少ない場面だと顔全体が少しチラつくこともありでした
垢版
病気悪化してんな
垢版
上の方にCG感が凄いと言われてるけど、GFPGANローカルで使えるしいいね

昔の写真やるのおもしろい

https://i.imgur.com/yK1QcbG.jpg
垢版
改行好きなん?
垢版
Mateで書き込めなくてpcでコピペしたら改行してた意味はないよ
垢版
ガ〜イ?
垢版
返信 [1]
今GTX1080使ってるけどRTX3060に変えると学習早くなるかね?
ゲームベンチだとあまり差がないからどうなのかなーと思ってます。
垢版
返信 [2]
口開けてるシーンが全部めっちゃ笑顔になっちゃうんだけどどうしたらいいんだ?
学習させる顔の笑顔シーンを消してから学習させるしかない?
垢版
返信 [1]
>>718
1080から3060に変えたけど、学習2は倍から3倍に速くなったよ。
1080だと512×512ぐらいのフェイスセットが限界だけど、
3060だと1000×1000でheadごと切り出しとかもイケる。
TDPも下がるし電気代的にもお得でマザボへの負担も若干少ない。

8ピンのみで動く光らないmsiのがお勧めだと思う。

ただメモリバス幅は1080よりだいぶ劣化するので完全上位互換では全くない。
古いゲームとかだと1080の方が速いかも。
垢版
返信 [1]
>>719
偽造しちゃうのも手だよ。

src側のalignedに切り出し後の顔画像が並んでるじゃん。
あれをdstの最終のmergedに全部コピペして merged to mp4すると、
顔が中心に寄った動画として書き出される。

これがサイズ、画角が中央に揃ってて、動画編集ソフトでコラージュしやすい。
笑ってない顔なら、真顔上半分と口開けた顔下半分とかで重ねれば大量に無表情の口開け顔とか作れる。
目を閉じてとか、片目閉じて(左右で重ねる)とかも同じ感じで作れる。
多少色なんかがズレてても、学習後は本番時のdstの顔色に揃えるんだからザックリでも結構うまくいく。
垢版
補足
MP4にする時に、dstの元動画も参照するから、
顔を切り出したsrcの元動画を、data_dstにリネームしとかないと動画書き出せない。
垢版
>>719
liaeの方がdstの表情に寄せるのに向いてる
垢版
>>720
なるほどー。

すごく参考になる情報ありがとう。
ゲームはやらないので載せ換える価値ありそうですね。

検討してみます。

もう少し出しても良いのなら3060tiの方がさらに早くなるかな?
3060はVRAM12GBなのが魅力なんですけどね。
垢版
df liveのお手軽さが最高なんだけどこれってsrcの顔をそのまま出力してるから
dfmモデルはsrcの学習データだけ利用してるのかね?
それならsrc×srcで時短して汎用モデル沢山作りたいんだけど
dstの学習データとかも使ってるとしたらsrc×dstで学習したモデル使った方が
照明条件とかdstへの適応力上がったりするのかな
垢版
触角ヘアをこの世から撲滅したい
垢版
ageたりsageたりでクソ自演Q&Aを繰り返す日記をこの世から撲滅したい
垢版
>>721>>723
サンクス、いろいろ試してみます。
垢版
画面外から顔がフェードインしてくるとき、一部分しか写ってない上にだいたいブラーかかってるから上手く認識されずにどうしてもおかしくなっちゃうな
数フレームだしカットしてしまうのが丸いかな
垢版
manual extractのa modeで拾う事は出来るけど、あんま良い結果になった事は無いな
自分の場合は切り出しの段階で省く
垢版
MVEで前後からコピペして位置合わせればいける
垢版
あーなるほど、天才だ
マニュアル人間だからそういう発想なかった
ありがとうございます
垢版
横顔とか笛も同じようにすると安定する
垢版
ワッチョイって大事なんだな
垢版
19日前のDeepFakeArchi.pyの更新で
Added -t arhi option.って書かれてて色々とコードが追加されてるけど
これはFP16で学習できるようになるのか?
iperovがRTMモデルに最適ですとしか回答してないからよく分からんが
2か月前にFP16でのテスト画面載せてたし
最新版のDFLのinternal Model_SAEHD Model.pyにも隠しコマンドみたいに
use fp16オプションと説明が追加されたりしてるからコード書き換えれば使えそうなんだが
垢版
9/6版だとOOMエラー。
8/12版ではさくさく いくのに。
同じSRCとDSTなのにどういうことでしょう?
垢版
返信 [1]
最新のやつって1080じゃまともに動かないよね
CUDA関連のファイル入れ替えたら動いたけど、1080はもう切り捨てられたのかな
垢版
状態と種類にもよるけど1080ならまだメルカリで4万円くらいで売れるから
58000円の3060買って12gbのvramで楽しもうぜ
垢版
返信 [1]
>>737
動くよ。
垢版
>>739
環境にもよるんだろうけど、そのままじゃ動かなかったんだ
エラーメッセージがCUDA絡みっぽかったからCUDAとCUDNNのフォルダの中身を去年12月のに入れ替えたら動いた
垢版
返信 [1]
>>712
顔抽出したファイルをGPENに掛けてもそのままではtrainで使えないけど
そこからもう1回顔抽出したら使えた
垢版
返信 [1]
>>741
>>705 の添付テキストの7行目に書いてあることを実施して頂くとGPEN後の画像をそのまま使える筈ですので試してみて下さい
垢版
ちなみに save & restore は本来 data_src のための機能なので対象画像をdata_src\alignedに格納してbatを実行する必要がありますね
垢版
返信 [1]
>>742
なるほどありがとう
GPENをよく分かってなくて、colabでデフォルトでやってるから、
元のJPGファイルからPNGができてるんだ
JPGで保存するように改造してみる
垢版
>>744
ごめんなさい
私自身はその後GPENの方はあまり触ってなくてColabの動作も変わってるかもですので不可解な点があればColab上のソースを覗いてみるといいかもですね
垢版
返信 [1]
XnConvertとか使えば解像度変えずにすぐpngからjpgに変換できるから楽だよ
垢版
>>746
ありがとう
colabだからLinux版を動かすか、
ファイルをダウンロードしてWindows版で変換するかだね
垢版
744だけど、colabのGPENでjpgを出力する方法
https://colab.research.google.com/github/tg-bomze/collection-of-notebooks/blob/master/GPEN_DFL_Colab.ipynb#scrollTo=0RF8vZUDL7Ma
「2) Simple settings」の後ろの方で.pngを.jpgに変更するだけだった(2ヵ所)
それと742でtrainに使えるはず
垢版
返信 [1]
gtx1660で2.0って動くの?cudaが使えればいいのかな?
垢版
返信 [2]
>>749
RTX3060でないと。
垢版
>>750
まだ完成させてないけど今トレーニング中なのでいけるみたい
垢版
>>750
まだ完成させてないけど今トレーニング中なのでいけるみたい
垢版
gtx900シリーズまではサポートされてるから普通に動かせるけど
6gbだとresとか全然上げられないからすぐ新しいの欲しくなるよ
垢版
興味本位で初めてみたけどこれ電気代ヤバくない?
ものすごい部屋の温度あがってたわ
Google colabはなんや難しそうやし…
垢版
月120-150hくらい2080tiでtrainしてたら電気代2-3kくらい上がった
垢版
発熱と電気代気になったから電力制限70%にしてるわ
パフォーマンスは5、6%しか落ちないな
垢版
これからの時期は暖房代わりになるぞ
ってほどでもないんだよな
垢版
GoogleColabProはマジでコスパ良いから絶対使ったほうがいいぞ
電気代だけでも元取れるし
垢版
返信 [1]
もしかしてLHRって良くない?
顔抽出をやってくるない事が多い-できることもある
垢版
>>759

自分はRTX3060狙ってるんだけどそれが気になって買えんのだよ。
誰か詳しい人教えろください。
垢版
制限無しの1660とgainwardの安いLHR3060を別のpcで使ってdstを半分ずつ抽出してるけど
顔抽出の精度は全く変わらんな dflの顔抽出の性能自体が悪いから抽出速度は3060が少し早い程度だけど
vram多いから3060だと1660の倍くらいの設定にしても問題無く学習できる
mrのスレッドでもLHRは関係無いって言われてるし顔の素材とか準備するのに時間かかるから
早く買って作業開始した方が良いよ
垢版
ちゃんとするなら結局は手動extract一択になるけどな…
垢版
暇人かよ
垢版
全フレームマニュアルで抽出するやつとかおらんやろ
それとも死んだvineみたいに6秒DFでも作るんか?
垢版
久々に触ったらオプション増えてまくってて何がなんやら
後半GAN使うときにこれはON/OFFにしろみたいなのってある?
垢版
返信 [1]
debugでちゃんとland/maskが一致するものを作るならmanualだろ
時間も自動とそんなに変わらんし 比較した事すら無い初心者は知らんけど
垢版
角度が30度以上つく場合のautoとmanual+aでのmask範囲の違いは大分印象変わるぞ
前髪多めの素材で俯いたりまばたきするフレーム、髪が輪郭を一部でも隠す場合、こういうのもマニュアルでやらないと
後からdebugで微妙な部分を探してmask editorで修正とか二度手間じゃん そこまでやってる奴このスレに居ないだろうけど
垢版
ただし使える部分のみ切り出した前提で、srcで5分(sortと目視選別必至)dstで1〜2分が現実的なライン
垢版
早漏かよ
垢版
手動でもランドマーク1点ごとに移動できない欠陥ツールだからこだわるならMVE1択
垢版
笛とかなら必須だろ 逆にどうしてんの?
AV丸ごとextractみたいなガイジはおいといて
垢版
>>766
君3f/secで何万フレームも手動抽出できるん?もはやAIやん
それともうんちグラボだと抽出クッソ遅いのかな?
垢版
1ー2分って書いてあって何フレームか分からないエアプが何言ってんの?
垢版
この蒙古弁終わってんな
垢版
そこまでやってる奴このスレに居ないだろうけど
wwwwwwwwww
垢版
ごめん見てなかったわまさかそんな短いとは思わんかった
でもdstの時間に関係なく秒速3フレームで抽出するの無理だよね?
仮に5秒で1フレーム抽出出来ても5時間かかるけど自動なら20分手直し考えてもまあ1時間
4時間くらいなら誤差な暇人か定年後の爺か?それならボケ防止によさそう
垢版
7777777
垢版
返信 [1]
数枚の写真からそれなりの動画作れた人っている?
身近な人で作れたら最高だけど動画なんて手に入らねーよ
■ このスレッドは過去ログ倉庫に格納されています

ニューススポーツなんでも実況