5ちゃんねる⇒ソフトウェア@5ch掲示板
設定
ダークモード
広告表示
画像・外部リンク

UPLIFT会員は外部リンクへ直接移動します。確認は初期設定でオンです。

機能のオン・オフ

このブラウザ・このサーバーのみ。オフにしても保存済みデータは残ります。

UPLIFT

1002コメント320KB

【質問】dfl【その4】

■ このスレッドは過去ログ倉庫に格納されています
垢版
返信 [2]
DeepFaceLab(以下、DFL)の質問&回答スレです

・質問について
日進月歩、モデルやオプションが多様化しているにもかかわらず、局所的な意見が散見されます。
必要に応じて自分の使ってるソフトやモデル、パラメータ等の詳細も書きましょう。

・エラーについて
エラーが出て解決できない場合は、なるべく詳細な情報(環境やどうしてそうなったか)を書きましょう。
特にエラー文は1番のヒントです。ググれば解決することも多いです。自分で解決できない場合はログを全文コピペしましょう。

・ソフトはどれ使えばいい?
利用者が多く情報が多いのはDFL。FSも英語圏では情報が得やすい。他は更新していない。

・必要スペックは?
VRAM容量6GB〜が推奨スペック。GPU性能は高い程いい。

・RTXシリーズでも動くの?
FS、DFL共に動く。

【質問】dfl【その3】
https://egg.5ch.net/test/read.cgi/software/1607860934/
垢版
みんなは芸能人をavに入れたりしてるん?
誰と誰が相性いいとか教えて下さい
ほんとは知り合いで作りたいけど動画はもちろん写真すら手に入らん
垢版
ツイッター探せばいますよ
垢版
ああ、そういうことじゃないのねw
失敬
垢版
色んな子で、というのは最初は思うんだがいざ作ってみるとやっぱり好みが絞られてくるから、ぶっちゃけdst作りの方が多くなる
出来るだけ完璧なモデルが作れればあとは流用できるからどんなに時間がかかっても解像度とか色々妥協せず最高のものを作りたいと思う派なんだ。
でもこうやったら完全に最高のものが作れるというのがいまいちよくわからんから辛い
今は中華が一番情報密度が濃いんかなあ
垢版
解像度とかはとりあえずてきとうに試して上手くいきそうなやつをちゃんと作り直すのが早いんじゃない?
垢版
髪型と声と体形が似てるdstだと神作品になりやすい
なんでdst側から逆算して作るようにしてるわ
垢版
俺は顔の大きさで決めてる
輪郭とか多少違っても顔が小さけりゃ
それなりに見れる
垢版
gpu2枚刺しでそれぞれ別のmodelをtrainできますか?
3060と3080tiでやってみたけどエラーで止まっちゃう
垢版
英語での情報だから曖昧だけど
32GB RAMと24スレッドCPU(AMDかIntelなのかコア数も不明) 2080Ti×3
で3つの別のモデルをトレーニングできた人がいるみたいだから一応できるんじゃないかな

DeepFaceLab_NVIDIA_RTX3000_series/_internal/DeepFaceLab/models/Model_SAEHD/Model.pyをメモ帳とかにドラッグして開いて
669行目のcpu_count = multiprocessing.cpu_count() って所を
cpu_count = min(multiprocessing.cpu_count(), 8) に書き換えて保存したら動作するようになったらしい

注意点は2番目以降に実行したモデルは設定に関係無く学習速度が半分に低下するっぽい?のと
動かない場合は仮想メモリを更に増やしたりモデルの設定を落としたりとか
後はpython詳しくないから分からないけどCPUコア数が少ない場合はcpu countの最後の「8」を変える必要とかあるかも
垢版
それ以前に二枚差しの条件をクリアしてる
上での話しですよね?
垢版
返信 [1]
GPUも詳しくないから俺からは何とも言えないんだけど
3000番代は3090と対応マザボしかNV LINKできないのとNV LINKなら1つの同じモデルを倍のVRAMと1.5倍速位で学習できるのは知ってたが
それぞれ別のモデルを動かす場合もNV LINKって必要なのかね?
垢版
すみません。仮想メモリを倍の250GBに設定したら動きました。
単に仮想メモリが足りていなかったみたいです
垢版
2GPU動かせる余裕さえあれば意外と簡単なんだな 解決して良かったわ
垢版
グラボ2枚あるからやってみたいけど
俺も
>>392に書いてある知識しかないな
2枚をNV LINKしないで動かせるもんなのか
垢版
まぁ単純に1枚につき1つのモデルを学習してるだけだからGPU的にはいつも通りの事だよね
2枚刺せるケースのスペースとか2枚フルで動かしても余裕な電源容量があれば問題無いんじゃない?
エアフローが悪かったりすると熱が凄そうだけど
垢版
そういうものなのね
マイニングとか複数枚使うことがなかったから
そもそもそういう知識がなかった
垢版
プレビューでは気にならないんだがいざマージしてみると顔の大きさに対してパーツがデカすぎるように感じることがあるんだがsrcとdstの相性の問題?それとも設定で解決出来るんですかね?
垢版
部分的ならランドマークの確認
全体的ならae_dimsの数値設定かな
デフォルト256だったら512にしてみるとか
垢版
全体的な話なのでae_dimsを512まであげて試してみたいと思います
垢版
返信 [1]
ここの猛者共は動画編集ソフトは何使ってる?ウォーターマーク付かないの探してるんだけどなんか良いのなくて
垢版
返信 [1]
>>401
猛者ではないがdavinci resolve

しかし、顔抽出はマジでもう少し何とかならんのかね
垢版
抽出の改善は数年前から提案されてるけどiperovが頑固すぎてS3FDから変える気無いみたいだから公式は無理だろうな
顔のdetectorにS3FDじゃなくてRetinaFace使ったりすれば早い上に正確に抽出できるようになるみたいだけど誰か頑張ってくれとしか言えねぇ
垢版
>>402
ありがとう!見てみたけどスゲー…
なんかプロ仕様じゃん…
でもこれよさそうだから頑張って使ってみるよー
垢版
VR試してるんだけど顔抽出に数十時間かかっちゃうんだけどそういうもの?
普通の動画だと数時間で終わるんだけども
垢版
超巨大画像から複数の顔を検出してたらそれぐらいになるんじゃない?
垢版
動画の総時間にもよるしVRだと、1画面に
2つ抽出するからなぁ
もしかして60分の動画とかやってる?
垢版
なるほど。編集面倒だから30分の動画でやってたんだけど2-3分にしたほうが良いのかも。
垢版
そもそもVRで使える場面なんてあんまりないから、ちゃんと編集したほうがいいよ
垢版
普通に作ってからvr化するで充分だと感じた
垢版
VRは基本正面向いてるから作りやすくはあるけどね
シーン厳選すれば
垢版
主観ものがVRばかりになってしまって寂しいんよ
垢版
基本顔が真ん中で歪んでないやつだけに厳選しとくわけね。結構手間暇かかるけどやってみるかな。VR化もありかもしれん。ありがと~
垢版
3060Ti(8GB)と3060(12GB)だったら3060一択?
垢版
res256で10gb以上消費してるから3060だな
ちなみに3080tiと3060だと処理速度の差は倍くらい
垢版
DFではFP32の計算速度が参考になるっぽいけど
90は35TFLOPS 80tiは34TF 60は13TFなのに学習速度は90でも60の2倍みたいだし
60tiは16TF位だから同じ設定に限れば60と処理速度はほぼ同じだと思う

しかし60はVRAMのおかげでかなり設定上げられるから安い上に学習も早くて顔の品質も高くできるし60一択
垢版
3080tiは一時に比べれば安くはなってるが
TDP350wってのがな
フルで動かすと400w近くいく

その点、3060ならフルでも200wいかないくらい
値段も半値で買えるしお手頃ではあるね
垢版
https://imgur.com/a/mg9tKAV

参考実数値
さすがに400w近くまではいかないか
垢版
TDP気にするならパワーリミットかけたりすれば全然電力使わなくなるし速度もほとんど下がらないけどなぁ
2ファンの安い3060でも制限せずに100%使用してると確かに180wくらいだけど
80%制限とかクロック少し下げるだけで130wくらいしか使わなくなるし温度も下がるし安定してるわ
垢版
それは考えたんだけど、安定性が欠けるんじゃないかと思ったのよ
MSIアフターバーナーでしょ?
垢版
使ってるgpuメーカーの専用ソフトがあるからそれで制限してるけどアフターバーナーで良いと思う
電源も安物だけど1日中パワーリミットしてVRAMは限界まで使って学習させても1回も不具合なんか起きたことないよ
マイニングしてる人とか50%制限で1年中動かしたりしてるみたいだけど問題無さそうだし
安定しないなら設定戻せば良いだけだしね
垢版
やってみようかな
今週末にグラボをパワーアップさせる予定なんだけど
やっぱりTDPも必然的に上がるし
悩ましいところだったんだよね
垢版
srcが歌のMVとかで顔面がピカピカ(テカテカ)してる問題はどうしたらいいん?
画像を暗くしたり、レベル補正、色相、彩度、光度など変えてもどうにもならんっ
垢版
某女優を時代劇っぽいドラマの素材で作ったらテカテカになり過ぎたから素直に他からの素材増やしたわ
垢版
windows11にしたらフォルダの中身見えなくなって作業糞めんどいな…
垢版
数日前にもwindows11にアップグレードさせようとする画面が出てきたけど、もちろん無視した
自分にとっての明確な利点が無い限り、上げない
ソフトが動かなくなったり不安定になるのが一番困る
安定している10で十分だわ
垢版
返信 [1]
声のディープフェイクってまだ作られていないの?
垢版
既にリアルタイムでできるやつがあるはず
垢版
RTX3000が安くなり始めたから買いたいところだけど4000まで待つか悩むわ
今の感じだと4000に対応するか微妙だよね
垢版
3000買って4000も買うんだよ
垢版
3000や4000にすればよりそっくりになるというのなら買うんだけどな
垢版
現状と同じ解像度でやるのであれば他の設定あげられる分よりそっくりになるだろう
解像度欲張るとあんまり変わらないだろうけど
垢版
ついさっき4090はTime Spy Extremeスコアがリークされたしそこまで遅延せず9月か10月には発売できそうか
他は予定より発売遅れそうだけど4080は16GB積んでるっぽいから3080とか80tiは微妙だなぁ
手持ちのVRAMが6GBとかで不満なら3000はすぐ手に入るしありかも
垢版
VRAM20gで解像度上げられるだけあげてみたけど
独特のノッペリ感はどうしても残る
それならres256か320でやってバッチ上げれば
学習速度が上がるから
そっちのほうがいいかもね
dst動画も720pなら全体的な違和感が減るから
そっちのほうが良いと思ったかな
垢版
今まで1080ti,2080tiが必要だった作業が5万以下でこなせる3060はdflの最適解よ
とりあえず3060買って40xx出てからハイエンドにするか考えれば良い
垢版
俺、勝手に解像度至上主義だから、バッチ犠牲にしてでも解像度をギリギリ上げようと思ってやったんだけ、ぶっちゃけそんなに劇的には変わらんような気もする
バッチはまあ時間かかってもいいから少なくていいかもと思ってるんだけど、ほかに上げるメリットってあるの?
あと、他のパラメータでこいつこそ重要だわってのがあるのかなあ
垢版
現状は他のパラメーターもデフォルトで
問題なさそうだし、eyes_mouth、li_dropout、
randm_warpは解像度を犠牲にしてまで
使わないってのは厳しいでしょ
全部使わなければres数値はもっと上げられるけど
垢版
>>427
real time voice cloning
てのがあるけどワシには使い方分からない
ついでに誰が教えてほしいね
垢版
声のディープフェイクやりたいわ
身近な人の写真手に入れるのは大変だけど音声くらいなら手に入れやすいし
垢版
声まで似せられたら、本物度はかなり上がるだろうね
自作の中にたまたまdstの声がsrsに似てたのがあって、その動画は自分で見ても凄く本物っぽい
垢版
グーグルコラボってどうなったか知ってる人いる?
垢版
GAN,TrueFace,LrD,RW,gradient clippingが使える条件で解像度全振りにしてる。
垢版
eyes_mouthは使わないの?
垢版
俺は解像度そこそこで早く仕上がるようにしてる
人に見せるもんじゃないし抜ければいいんだよ
垢版
返信 [1]
300万超えてからはeye mouthなくてもそれなりに出来るし、1日で仕上がるから、解像度全振りで困ってない。
垢版
liae-udtの方が滑らかに仕上がるが
liae-udの方が本人に似ている

出来れば後者にしたいところだがmergeすると何か額の左右辺りにフチが出るんだよなあ…ちゃんとXsegもしてるんだが
垢版
>>445
res高いとGAN power0.1でも肌がきめ細かくなってくるまでにかなり時間かかるよね
res変えて1から使い始める時とか特にだけど GANは何時間くらいオンにしてる?
垢版
LIAEだと使い回した時に似せづらいからDF-udt使ってる。
半日RW onにして、半日GAN,lrdをonでRW offにしてる。
最初の200万は安定しないと割り切ったほうがいい。
垢版
返信 [1]
res320位でGAN最初から鍛えたかったけど200万でも半日かかるのは長いなぁ
res224で200万以上のモデルだとGANもすぐ完成するからそれで我慢しとくかな
垢版
全部試したわけではないけど、UDのみが
一番似るんでないのかな
つかそう思っていた
ただUDだけだと設定上げられないんだよね
垢版
返信 [1]
つか200万も回すんかいな
res320だと半日回しても10万程度しかいかん
垢版
>>449
どれくらいこだわるかによる。正面だけとかならすぐ。笛あり20分動画でこだわりたいとき1日かける。

>>451
色々作りながらだったから2ヶ月くらいかかった。res384
垢版
X-segを使い回すんだけど、なぜか口の中まで
マスクされてしまい
歯が二重とかになるんですよね
>>261の人がMVEを使った修正方法を
書いてくれているけど
難しくてできない、、、

口の中(特に歯)なんてマスクしないのに
使い回すと勝手に学習してしまうんですかね
都度、X-segするのとても面倒
垢版
マスクしてる素材に口あけてるのが少なすぎるとか、もしくは逆に多すぎるとかじゃないの
自前のmodelではなったことないから分かんないけど
垢版
返信 [1]
口の中をマスクしないxseg作るしか無いんじゃないの
口の中までマスクされてるalignedを探して顔囲んでxsegのtrainするだけ
垢版
240の中華xseg使えば?それでtrainもしてないけど特に困ることないが。
垢版
アドバイスサンクス
中華のやつは試したけど駄目だった
>>455
どうもそれっぽいです
割合的にはかなり少ないのですが
舌を出していれば当然舌もマスクするので
その影響が出てるっぽい
口の中は一切マスクしないのを一回作って
それをベースとして保存して
そこから作る作品に合わせて微調整していく
というのがベターっぽいです
色々助かりました
垢版
udtの方が似る気がする
垢版
返信 [1]
一度モデルができれば使い回しするとして、モデルとして完成してAその上で、使いたいdstをしばらく回して作るB
で、再度他のを作りたい時には保存していたAのモデルでその都度使うのがいいのか、Bのモデルに継ぎ足ししていく感じのがいいのか
scrはそもそも貼り付けるデータだから同じやつでいいがdstは本来バリエーションに富んだ方がいいから、一つのdstでずっと育てるより育成途中に変えて行った方が結果手にはいいんだろうか

今まで継ぎ足し系でやったら割とできがよかったが、それだけが原因ではないかもしれんから詳しい人教えてください
垢版
まずmodelの設定を晒さないことにはなんとも
垢版
返信 [1]
初心者です。st、srcの顔画像切り出し、マスク範囲設定(xseg)からxsegのtrain、applyまで完了していよいよtrainするのですが、画像の読み込みまで完了後、続行するには何かキーを…で止まってしまいます。
SAEHD、Quick96どっちでやっても同じです。
何か手順が間違っているのでしょうか?
DFLのバージョンは最新、グラボはRTX3050です。
垢版
返信 [1]
windowsの設定でGPUスケジューリングをオンにする
DFLを置いてるドライブのページングファイルを32GB(32000MB)くらいに設定する

とりあえずまずやるべきはこの2つかな 設定方法はググればすぐ出る
垢版
>>462
ありがとうございます。
2つとも設定して再起動後、再度試してみましたが症状変わらずでした。
他に原因ありそうでしょうか?
垢版
dflは3000シリーズでやってます?
垢版
>>461

Ryzen9 3950xだとtrain環境のあるドライブのページファイルを
100GBくらいにしたらやっとtrain動いた
因みにRTX3060
垢版
CPUとRAMの量によってページングファイルがもっと必要になるみたいだから上げた方が良さそうだね
ドライブの空き容量が数GBとかしかないのもダメっぽい

それとintel 12世代だとwin11への更新が必須みたい
一応nvidiaドライバーの更新も確認
あとはDFLの推奨がtensorflow-gpu==2.4.0なんだけど2.6.0にしたら動くパターンも経験してる
垢版
みなさん、ありがとうございます!
色々教えてもらった方法をまずは試してみます!
垢版
というか最初はxsegとか考えずに短いsrcとdst用意して抽出→train→mergeまでの一連の流れをできるようになったほうがいいよ
垢版
459ですが、
設定としては、
3060を使っていて、解像度は448
liae-udtにしています。
バッチは4です。
eyeはオン、random_srcはオンにしています。
今は100万回ぐらい回しました。
最初に、カラーはなしにした方がいいかと思いましたが、途中で、rctに変えました。
さらに途中で、eyeをオフにすると、少しマージが減ったのですが、再度入れてみました。
90万回あたりで、random_warpをオフにしました。
結局loss値は0.5ぐらいを維持してあまり下がりません。
全然だめなわけではないけども、おそらくこれは間違った部分があるのだろうと思っています。
垢版
返信 [1]
動画から抽出した、data_src内のpngは
顔抽出した後は消しても問題ありませんか?
垢版
抽出した画像の中身確認はした?
パッと見でおかしいのはもちろん消すけど
一見まともに見えてもランドマークめちゃくちゃな顔もあったりする
そういうのが多いとloss値下がり辛いしmergeしても変になるよ
垢版
見た目はどうなんだい
数値ばっか気にしても意味ないよ
垢版
返信 [1]
>>470
srcのほうの抽出前pngは消してもいい
dstのほうは最後のマージで使うのでとっといてね
何回かやってるうちに大体できるようになってくると思うよ
垢版
>>459
dst継ぎ足しでやってるけど特に問題ないな。前ここで教えてもらってinter.npyは毎回消してやってる
垢版
>>473
ありがとうございます
容量が大きいので消します
垢版
src flipは無駄でしかないから使わない方が良いし仕上がりの悪さにかなり影響してると思う
eyes mouth prioは目と口を重点的に学習するからオンにすると急激にloss値上がるしオフにすれば急激に下がる
多分100万も回してたらオフにすればすぐ0.1くらいになると思う
そしてloss値はsrcとdstの参考にしかならず結果のprdは数値化されてないから結果が良ければ気にする必要はない
垢版
返信 [1]
モデルもらってコツとか教えて貰ったら自分でもびっくりするのが1日でできた。2週間自力で頑張ったのはなんだったんだろう。
垢版
最初はそんなもんだ
垢版
pretrainingを20万回して
loss値1.32/1.22で、通常trainingに進みたいのですが
進む前の仕上げ設定やloss値が不足等、他に何かありますか?

clippingとeye and mouth priorityをonにして
他はデフォルト、外国人のfacesetを使ってます
垢版
返信 [1]
>>477
mrで貰ったモデル?
中々上手く作れなくて、俺も誰かに教えて貰いたいわ
垢版
>>480
SNSで日本人から。詳しく書くと迷惑かかるかもしれないから控えるけど、素人が1からやるもんじゃないと思った。
垢版
正解が無いからいっぱい失敗しながら自分のやりたい事やるしかない
■ このスレッドは過去ログ倉庫に格納されています

ニューススポーツなんでも実況