【質問】dfl【その3】

DeepFaceLab(以下、DFL)の質問&回答スレです

・質問について
日進月歩、モデルやオプションが多様化しているにもかかわらず、局所的な意見が散見されます。
必要に応じて自分の使ってるソフトやモデル、パラメータ等の詳細も書きましょう。

・エラーについて
エラーが出て解決できない場合は、なるべく詳細な情報(環境やどうしてそうなったか)を書きましょう。
特にエラー文は1番のヒントです。ググれば解決することも多いです。自分で解決できない場合はログを全文コピペしましょう。

・ソフトはどれ使えばいい？
利用者が多く情報が多いのはDFL。FSも英語圏では情報が得やすい。他は更新していない。

・必要スペックは？
VRAM容量6GB〜が推奨スペック。GPU性能は高い程いい。

・RTXシリーズでも動くの？
FS、DFL共に動く。

dstでいい感じのシーンとか、トリミング編集とかできないと、DFLも無理でしょうね
dstが顔でかくて、ボケるかも？だと画面サイズ縮小編集とか
DFLの他、フリーの動画編集ソフトとかで遊んだりしませんでしたか？

あっ、DSTって短くしないと駄目なんですか

一応日常的に編集動画投稿してます(最高再生回数二万回)
SRCのtrainに時間かかると思ってたので、DSTは負荷かからないと勘違いしてた
どうもありがとう

dstが長すぎる事によるエラーがあるかも知れませんが
やった事はないので分からないです
そんな、顔を入れ替えたいシーンばかりではなく、だらだら長い所、
平板なシーンも多いでしょうに

顔の未検出の手動抽出とかあるから、dstが長いと大変だと思います
そのままだとちらちらdstに戻り、顔が入れ替わらない
顔の誤検出の手動削除もあります

完成後、がっかりとかあると思いますし、いきなり長くてもね

鏡と話すおじさん怖すぎ

最初に思ってたのは2時間やるとしても、使えるのはそこから20分くらい、と思ってたんですよね

5分でやると10秒位では、と思う

mergeの時にinteractive mergerを使わないで、batの末尾に<merge.txtみたいな形でテキストに事前に書いた設定項目読み込ませたいんだけど、
Use interactive merger?をnで渡しても勝手にyになって、起動しちゃうのどうにかならない？
20210104使ってます。

設定項目とは

0とかmklとか、そういう手動で入力する項目

多分、最初の方はBatで食わせるがうまくいかないみたいで
Pythonいじって、何とか。。
面倒なので、ほっといてますが

日記の句読点は異常

dstはショートカットとか、髪を上げていると
輪郭がごまかせないので、違和感が出る事があるみたい
麻○憂ちゃんの無臭時代はショートカット
残念

昨日のドラマでdeepfake連呼してたなw

ただでさえ電気代かかるのにマイニング収益も考えると機会損失が大きすぎて作れない

お、おう

誰か3060でやってる人いる？
くそ味噌言われてるけど12gは使えるんじゃね

これ使えね？
https://www.youtube.com/watch?v=Ki9NVyD3It4
https://www.youtube.com/watch?v=J2AnvERt8jU

https://ebsynth.com/

10.misc) start EBSynth.bat

@echo off
call _internal\setenv.bat

start "" /D "%INTERNAL%\EbSynth" /LOW "%INTERNAL%\EbSynth\EbSynth.exe" "%INTERNAL%\EbSynth\SampleProject\sample.ebs"

とかありますな

ワンピースの普通の水着をラバーコーティングのテカテカ水着に描きかえる的なことはできる

よくそういう発想ができるな(褒め言葉)
素直に感心する
髪色の変更とかパンストを網タイツに、とかも頑張ればできそうかな

【合成】娘のライバルを蹴落とすため「ディープフェイク」作成、母親を逮捕 米
ttps://news.livedoor.com/article/detail/19850564/

チアリーダーとして活動する娘のライバルたちが裸で飲酒・喫煙する映像をAIでねつ造し、本人らに送付。自殺を促すメッセージも匿名で送信したとみられている。

アメリカはすげーな

かあーちゃん…

headより広い範囲を抽出する方法ある？
髪が長いと途切れてまう・・

それだと肩より上が収まる画面は全体が入れ替わる事になるけど…

dst探しが作業時間の9割を占めてる気がする

trainだぞ

modelの学習が300から400万回ぐらいに育ってしまうと、流用すれば新規のdstでも数時間で仕上がってくる
そうなると、aligned debugのチェック＆手動でのパス再作成が大半の時間を占めるね
もちろん、それとは別にdst探しはやるけど

素朴な疑問なんだが、流用っていうテクニックがあって、他の人物にもあまり悪影響ない、一番のユーザー不満である時間短縮ができる
それなら初期のパッケージとして普通は用意すべきだよな？

それをしないのってなんでなの？

>>2

量産してるやつとか流用してるけどだいたい似てないやん

元アイドルＡと、とあるdstでいちから動画を作る
dstを次々替えて（外国人を含む）どんどん動画を作る
modelが成長してくると、train時間は短くてもすぐに似る
というパターンで、他にタレントＢや女優Ｃのmodelも作っているが、dstがどれだけ似ているかがやっぱり重要
dstの顔の輪郭や髪型がかけ離れていると、あいのこみたいな顔にしかならない

それちゃんと学習できてないから...
何回繰り返すのか...

自分が満足できるクオリティで作れているので、良しとしています

srcモデル流用しないで(とある所でsrc流用はやめる。dstxdst学習のため)
毎回新規のsrcから作成しているの？
srcA→srcBでsrcBが完成したと思ったらやめる
srcA→srcCでsrcCが完成したと思ったらやめる

新バージョン来た
何が変わったんだろう

あんまりどうでもいい変更だな

初心者にはそうかも

関係ないやつもいるだろ！
初心者さん！

ランダムフリップとか普通使わないじゃない

08_02_2020から以降してみたが
adabelief: TrueだとVRAMバカ食い？
Batch Size半分でもエラー
使うのなら最後の方で使うのかな？

>>285
そっちかよ
入力サイズと画像サイズ合わせて読み込み時間節約の方だと思った

>>285
srcは使用しないが、dstに使用するといいかも？
実験してみますか

>>286
adabeliefは新しい学習方法なので
途中でoffにするとadabeliefでトレインしたものは活かしてくれない
なので使うなら最初からonにして
途中からoffにしない
あと使用するvram多いよ

>>288
ややこしくなるから初心者は質問だけしてればいいです...

>>289
ありがとう

adabeliefかなり速いから常にONだわ

おはよう
adabelie off onにしたら、最初から学習し直し？
Loss値がみるみる下がりますね

adabelie off onにしたらXsegモデル学習し直しみたい
src/dst 512→256にしたら、Mergeがむちゃむちゃ速いですね

Xsegモデルコピーしてませんでした

去年の7月ぶりに最新版にアップデートするけど新しい機能増えてますか？

何言っているのかちょっと判らない

解凍した後changelog.htmlを見れば変更点と新規機能が分かるかと

新GANどうよ

Multiple Choices

アップデートしたけどsrc側に顔が寄るのがデフォ設定に変わった感じ

liaeになってただけか

顔の切り出しが遅すぎるの何とかしてほしいよ
CPUもGPUも20%以下しか使ってないのがもったいない

新しいpc作ってやりたいけどグラボが全然ねぇ、、、
radeonはまだ対応してないんだよね。。。
CPUって全然話題に上がらんけど、5800xでも5950Xでも大差ないの？

Radeonは1.0しか対応してないぞ

ごめん流し見でGPUの話かと思った

CPUこそ一番良い奴にすべき

>>304
2.0からコア数に比例して学習が速くなるようになってるはずやで

CPUも重要なのか、、誰にも見せれないのに中々金のかかる趣味だなｗ

dst用にお勧めのAVタイトルとか、プレイ内容別にまとめている神って居ないのかしら？
少なくともググった位では見つからないんだよね。

前まで素材スレあったんだけどね

モザの壁

>>310
Deepfake 素材に関するスレ　
でググってみ。

>>313
見つかりました。
早速勉強させていただきます。

ありがとう、ありがとう。

src/dst 256x256にしたらae_dims:512だとだめみたい
ae_dims:256までかな

お世話になります
質問です

１、目に髪がかかっているのはSRCにすべき？

2、特定の作品が化粧違うが、これはSRCにいれるべき？

>>316
�@避けた方が良いが、dstが同条件(mask範囲内での髪の位置など)ならイケる場合も
�A個別で作成した方が良いが、どうしても角度や表情がカバー出来ないなら、メインとする方のfacesetに対し10%程度なら補足としての追加がイケる場合も

なるほどありがとうございます

ってことは肌の色味が違うのとかはどうなんでしょうか
SRCって輪郭だけじゃなく色も見てますよね？

>>318
極端に暗いとか、野外で光の当たり方がキツいのは特にmodel形成を阻害する所感
train時のcolor transでmklとか入れてれば、ある程度なら調整してくれるが、現状mergeではdstと同じにはなり辛い
髪型については、眉を超える前髪とか触角は自動extractはほぼ無理　手動Aやmask調整で適正範囲を指定してもtrainやmergeでグダグダになり易い

adabeliefは学習速度を上げるだけ？
であればDimsを上げてadabelief offにした方がいい気もする

入り切り出来ないじゃん

PreTrainやってなかったんたんだけど必須ですかね？

ドラゴン桜が今夜から再放送

CPU変えてめっちゃ早くなって安定したって報告しようとしたらちょうどCPUの話題になってた。
i5 7500→i9 10800に変えたらtrain速度1.３倍、merge速度１００倍になったわ。
merge一瞬で終わるし、train中動画見たりゲームとかしても落ちないしもっと早く変えるべきだった。

どどるげ動画さんすごいな

スレチ

mergeはCPUのスレッドが多ければ多いだけ速いね

久しぶりにやったらliaeがデフォになったんだな。dfの方が似るように思うんだが、liae何か進化したのか？

>>328>>2
liaeとdfの違いから見直した方が良い

顔の相性がいい素材のliaeが一番クオリティ高い

dfの方が似ると思うのならそれでいいと思う
俺は差異を感じなかったし利点もあるのでliaeに移行した

相性と数だね　数百万分のナンボが合うかって感じだけど

顔が似るのは明らかにDF

dfは表情の追従が弱い
よほどsrcのバリエーションが多くないと
もしくはdstが短いとか

eyes_mouth_prio: False
にしたらいきなりLoss値が下がった

liaeの万能な所を経験するとdfには戻れないな
正面の静止画メインならdf一択だが

>>335
名前のとおり目と口を主に学習して他の部分はほとんど学習しないから
目と口に違和感がないかぎり基本offだね

liae似ないんだけど、何かコツある？

liaeは最後にganpower使用しないと似ている感じがしないね
まずはdfl guideのQ＆AのQ8の通りにきちんとtrainしてloss値十分下がったあとの最後の仕上げに使う
ganpower使うと表情はdstに寄ってしまうけど
srcの細かいシワ、しみ、ホクロ等が反映されるようになる
学習が進めばlrdをonにしてtrainするだけで反映されるようになる
あとはたまに学習ミスってモザイクがでたりするからganpower使用する前にmodelをバックアップしたほうが良い

これで似なかったらdstとsrcの相性が良くなかったと判断してあきらめる

最新版のDFLで5.XSeg) train実行してバッチ２にしても動かないのですが単純にGPU性能不足でしょうか
GPUはGTX1080です。

>>338
今までデフォ設定のままで、gan使ったことなかったから試してみるは

>>340
同じGPUだが余裕だ
mrdeepfakesのModel name: LIAE-UD FF 192_SAEHDっての使ってる

windowsの設定でした。　解決しました

>>337
liaeはdfよりもdstとの一致要求がシビアなので、flip使うのも場合によっては有効
warp切ったらGANじゃなくてdropを使う方が良い気がする

teslaとかサーバー製品って、メモリ帯域はすごいけどFP32のTFLOPSの値は一般向けのGEFORCE 3090の方が上なんだけど、学習にはどっちが有利なんだろうね
もちろん、アプリの種類にもよるんだろうが

サーバー向けは科学技術計算で使われるFP64の性能も要求されるからこの分FP32の性能があげられないんだろう

https://qiita.com/yukoba/items/10d0ba3fb1d19a6ab6a5
グラフィックで多用される演算と学習で多用される演算がFP32が同じだからね

WFでやったら頭頂部付近が気になる