【質問】dfl【その3】

DeepFaceLab(以下、DFL)の質問&回答スレです

・質問について
日進月歩、モデルやオプションが多様化しているにもかかわらず、局所的な意見が散見されます。
必要に応じて自分の使ってるソフトやモデル、パラメータ等の詳細も書きましょう。

・エラーについて
エラーが出て解決できない場合は、なるべく詳細な情報(環境やどうしてそうなったか)を書きましょう。
特にエラー文は1番のヒントです。ググれば解決することも多いです。自分で解決できない場合はログを全文コピペしましょう。

・ソフトはどれ使えばいい？
利用者が多く情報が多いのはDFL。FSも英語圏では情報が得やすい。他は更新していない。

・必要スペックは？
VRAM容量6GB〜が推奨スペック。GPU性能は高い程いい。

・RTXシリーズでも動くの？
FS、DFL共に動く。

headなら、顔の輪郭まで持ってけそうだと思ってやってるけど、まだmergeまで行ってない。
ま、最近忙しくて、作業を進められてないのが原因だけど。
df faceのmodelなら３人作ったし、結構短時間で新作作れるけど、顔の輪郭で不満が残る場合があり…

顔の輪郭までならheadである必要もないかと思う
>>146でも書いてあるけど新しいバージョンが上位互換というわけでもないし
おでこに髪がかかるようなsrcはfを使うのがベストと作者も言ってた気がするし、fから進めない

自分も眉毛の下でmaskするからextractはwfだけどarchiはずっとfだな
ただheadだと輪郭前髪ごと移植できるみたいだから気にはなってる

こういう場合に、気楽にアップできないのがつらいな。

せやな
headがどれくらい補完できるか気になる

3070で顔の切り抜きの速度1.2it/sって普通なんですかね？なにか自分の設定が悪いのでしょうか

それで普通
extract faceはGPUもCPUも全然性能使い切ってくれないから遅い

色々試してみて感じたのは
DFLの最大の弱点は顔抽出の精度
Xsegみたいにユーザーの手動検出を元に学習とかできないのかな

DFLそんなに遅いのか...

顔検出の精度低いって、ちんこ重なってると駄目なん?

口が隠れてると手動での検出すら厳しくなるね
2年ぐらい使ってるけど、この辺は一切進化してない
作者がいじれない所らしい

そっか
ちんこが問題かw

3pとか2人以上の顔の差し替えを同一動画で作るのは
どういう手順で作ってるんでしょうか？

予想だけどA,B両方抽出してBのalignedとdebug消してAをXに変換→result出力
そのresultからX,Bを抽出してXのalignedとDebug消してBをYに変換
みたいな流れじゃないかな

src(芸能人)は小顔で目が大きい→dstは顔が大きく目が小さい→trainでdstのlandmarkサイズを基準に学習→マスク外のサイズが微妙になる…

>>161
mergeのときに顔のサイズ変えられるでしょ
Jを押して大きくしてみては

それはmask内部の事…サンクス

輪郭に合わせるとなんか巨頭オみたいになって違和感バキバキの時あるね
特に上から見下ろすシーンが気持ち悪くなる気がする

自分も時々起こるので、対策が知りたい。
ｄｓｔのマスクが大きくて、ｓｒｃが小さいので、Ｊで大きくして間を埋めようとすると
頭でっかちになってしまう症状。あごと首のラインのところでおかしくなるんだよなあ。
rawで出力してdavinciresolveで合成するとかなりましになったので、起こったときの
対策はとりあえず、そうしている。

後は、fullfaceのrect範囲(赤枠)の大きさがmanualでも小さい場合も多い　特に横顔とか口を大きく開けてる画
headとかだと素材の制限が増えて違うし

>>153
そうなんですね。ありがとうございます

謎の3060は明日発売か

貞松はマジでdfl殺しだなぁ

3060はコア性能が2060s以下だとわかったため
3000スレはお通夜になっている

遅ればせながらhead試してみた
髪の色と長さが合っていれば本人そのものを再現できてよいですね・・・
ただ、やはり先人のコメントのとおり注意点、制限も

・同一ソースからのsrc抽出が必要
（複数ソースだとsrcの髪型に一貫性がないため、mergeしたときに髪の毛が薄く生えたり
　濃く生えたりする箇所が出てきて変になる）
・動きが少なく正面シーン中心じゃないとmergeが滲みやすい

head試してたんだけど、train200万回近く回してもクリーチャー顔がいくつか残り、いまいにはそれが増えだしたから一時凍結したわ

肩弱い奴はハメ撮り止めちまえ！顔見切れすぎブレすぎ枕使わないから角度煽りすぎ

つ 全編超広角

森七菜ちゃん可愛いね

Xsegあまり鍛えられていないので(手作業が面倒)
前髪、舌、笛があまりうまくいっていない(ボケる感じ？)

あと、額とかの色合わせとか。。

動画編集ソフトとか？
使い方が謎です。。
簡単に教えてはもらえませんし

Xsegでマスクするだけだろ

Xseg で要所要所をマスクしても、前後のフレームがまったく顔検出出来ないことがあるんだが何でだろう？
あれって、同じような構図のフレームは、１フレームだけ指定すれば、ほかのフレームは同じように学習してくれると思ってるんだけど違うの？

結局、ほぼ全フレームに近い形でマスクしないと思ったようにならなくてチョー面倒なんだけど（涙
一部のフレームだけ指定すると、dst のままのフレームがたくさんあって src の中に dst がちらちら入り込んじゃう。
何か、やり方間違ってるのかしら。。。
(もちろん、本学習の前に Xseg の train・fetch・apply はしてる)

xsegはsrcとdst分けて学習したほうが楽
あと、xsegはすぐに過学習になるから汎用性がなくなってきたら
リセットしてやり直さなきゃいけない

>>178
その現象、自分も経験した
自分の場合は、Xsegしたコマに、実線で囲まれた領域が無くて、破線で囲まれた領域のみのやつが混じってたせいだった

extract結果自体がマズいと予想

コツをつかんだけど外しまくりです

>>179
俺はmodelも手動指定した画像も流用しまくってるけど問題ないよ
200万回ぐらい回したmodelで過去のdstで手動指定した画像300枚くらいと新規のdst参照するようにして回せばbatch13なら10分も回せば十分はっきりマスクされる
それまでに手動でやってないパターンのマスクは流石に無理だけど

すみません
Xsegtrainはどのくらいやればいいものですか？
目安となる時間を教えて頂きたいです。

>>184
2時間くらいでおｋ

これ、そっくりになるね。始めたばかりだけど、その辺のサイトに落ちてるのより自分でやった方が似てると思う

>>178
似たような構図でも目が開いてるか閉じてるかだけでもマスク範囲が変わるんで別物として編集する
XSegの注意点として例に挙がってるのが、目の開閉・顔の向き・照明条件
最初のうちはかなり面倒くさいけど地道にサンプルを増やしてくしかない

win10のexplorerがアホ過ぎてストレス貯まる

extractorの方がアホ

最新版で１か月ぐらいheadに挑戦してたけど結果が良くないので、Fansegラストビルドの20200327に戻ってる
で、最近Train中にプログラムがいつの間にかフリーズしてる現象が多発なんだけど、同じ状況の方いますか？

それに該当するかはわからんけど、train中にcmdの黒画面を触っちゃって中断状態になる事がある
その時は同画面アクティブで適当なキーを押せば再開する

再挑戦したいんですが、ＡＭＤRYZENでdfl1.0使ってて教えられるよ、ってかたいませんか？
当方は趣味で動画編集してるくらいの無知なのですが

前回は、trainさせたのをはめ込んだら顔がのっぺらぼうになってやめました

>>191
サンクス、それかも知れないので帰ったらやってみます。

GPU無しは厳しいだろうな

RadeonじゃなくてRyzen？Threadripper ならいけるか？
そんなことするくらいなら1080tiの中古でも買った方が良さそうだけど

いかんせん解説サイトないのがね

そこらへんのサイト見てわからないのは知らない言葉の数だろ？
知らない言葉全部聞く気か？
そんな他力本願のやつに教えるのにどれだけ時間かかるか想像してみ
本当に作りたきゃ調べる努力をしてわからないことを聞きなよ

最新版でFAN-dstの設定なくなったのだるすぎる
マスク編集めんどくせぇ

fan-dstも残してくれれば良かったのにね
でもXSegの方が明らかに高機能で、フェラもベロチューも違和感なく出来るからオススメ

ただフェラもキスもextractが異常に下手クソなんだよな

別に機能はxsegもfansegも全く同じだぞ
extractはmanualのAを使ったことが無い、使える画の選定がグダグダだと話にならんけど

話の通じないやつだな

別途、舌と思われるパターンをXsegマスクするツールが欲しいな。。
ランドマークが入らないので、難しい、できないのでしょうか？
前髪も同様。前髪ありは日本人、韓国人くらいかな。。

>>203
自作した。汎用性は低いけど。

俺もheadやってみたが、確かに上であがってるような一長一短。
200k程度回して簡単な角度なら最高だけど、ちょっとでも角度がきつくなるとクリーチャーに。
Xsegのサンプル数も多く、とにかくなにより抽出の精度が異常に悪く、相当数手作業になる感じだな。
srcセットには出来る労力だけど、数多くのdstセットに同じ労力使えるかといわれると…
だがツボはまるとこれはつよい…

すみません　
xsegでフェラ編集する場合、editで範囲指定するときにdstの口まわりを除外するように指定して、完成時にsrcに除外したdstの口回りをうつしだすということであってますか？

>>206
>>2

質問なんだが、SRCって最低どのくらいの時間でやってる？
1時間で充分なのかわからん

時間じゃなくて使えるフレーム数と表情角度のバリエーションで考えろ😠

すまん、普通のフレーム数ってどのくらいなんでしょうか

3000〜4000
もっと少なくてもいいときもあればもっと多い方がよいときもあるが
これくらいをベースに調整してみるとよいでしょう

ありがとうございます
またあとで自分のやつと照らし合わせて返します

ゲーミングノートでやってる人いる？
rtx30〜のノートを買おうかと思ってるんだがデスクトップ比較でどんなもんか知りたい

39 名無しさん＠お腹いっぱい。 sage 2021/02/03(水) 23:43:22.40 ID:5tX+xQ2H0
CPU Ryzen 3900XT
GPU GTX 1080
DFL2.0

でtrainしたら、tensorflowのエラーやらで止まってしまうんだけど、AMDのCPUだとダメなんだろうか？
AMDのグラボはサポートしなくなったのはわかるんだけどCPUはサポートしてるよね？


これって俺もで、これからはじめようとここにたどり着いた
どうなのでしょうか？

最新版はRTXにしか対応してないんじゃないっけ

あ、俺のRTX3000なんだよね...
なんか調べてたら3000は特殊らしいんだが

>>214
3000版用と2000まで用と2種類ある
39は欲張りすぎてoomになっているだけかと
3000版はgpuスケジューリングonにしないとエラーでやすいね

一番最新のやつダウンロードしちゃいました
名前は02_03_2020.exeなんですがどうなんでしょう

GPUのスペック越える設定でtrainしようとするとエラー吐いて始まらないよ
無印1080なら
Archi:DF
reso128
各dims:64
bs:4
adabelief-
その他オプションデフォルトでtrain開始しない？

>>214
俺も1080でCPUはryzenだけど問題なく動いてるから、頑張れば動くよ
俺はフォーラムにある
LIAE-UD FF 192_SAEHD
ってモデルを愛用してる

いまはDSTとＳＲＣを全フレーム抽出するところまでやりました

残業多い社会人で時間かかるので、結構手間かけて無理ってわかったらしょっくだなぁー

いや、RTX3000シリーズでRYZENCPUなんですよね

お前には無理だから諦めろ

さては外付HDD3070おじさんか？

一応今日始めました


https://i.imgur.com/lqRpxS1.jpg
この画面から一時間待っても動かずエンター押したらこの通り
なにが悪いんでしょう

>>217 で解決してるのになんでそんなにターンかかるの...
2020.3が最新の訳ないやん...

この人絶対に無理だよ
きっとDFLだけじゃなく何やらせても無理だよ

ファイル数が22万なので
2時間位の動画か
顔抽出失敗の数を見て卒倒しないようにね
01_04_2021の最新版をしようしてもvram不足でエラーでそうやね
dstは最初は720p 10秒位にしていろいろ試したほうがよいよ

皆さんご回答、本当にありがとうございます

720p10秒っていうのはどこで設定出来るのかわからないのですがどうしたら良いでしょう

４つの動画をひとつにまとめてやってるので負荷かかるかな、とは思ってました

ただ、一つ一つやろうとしたら抽出は上書きされるみたいでこれしかなかったんですよねえ

うーむ
昔、大学で、理系、工学部だと、手計算やってられない物があるので
科学技術計算、FORTRANとかやって
計算機とはー
とか
プログラムとはー
とか、ある程度、概念形成されると思うんだよね
一般常識として、計算機、プログラムとはーとか、ある程度ないとまずいんでないの？
どうするよ？

Pythonなんか、ソースコード丸見えだから、
if then elseとか
forループとか
ある程度は共通ですよ
型宣言しないので、なんじゃこりゃでした
1バイトデータとか確保してないのに、なぜ分かり、動くん？でした
andとかorとか、簡単な事が概念形成されればいいかと個人的には思います

たまにいるよね
スクリーンショットを「写真」で撮る奴ｗ

ブタに真珠

付属のサンプル動画で一通りやってみればいいのに

猿以下の脳みそなんだから無駄

次は、正面近く、カメラ目線で尺の短いdstとか
srcが眉なしだけだと、dstの眉をそのまま出すだけだし、本人の眉情報が無い
瞬きしてもいいけど、目瞑りぱなしだと、顔の特徴が出ませんな
俯きも、目玉が見えませんし、その分特徴が出づらいかと思います
上向きなんて、srcそんなに集められない気がします

チラ裏

またご面倒かけてすんません
昨日に続いて最新のDFL入れたら作業途中でこんな画面になりました

なにが悪かったんでしょうか

https://i.imgur.com/AwgDTRh.jpg

ダズント　レスポンス　だそうです

理由になっていない

2度と来るなと言っただろ

言ってなくて草
でもまあ聞く耳持たず
２回目だからレッドカードだな

>>19

>>239
すごく簡潔に言うと
君には無理だよ

誰か日常的に使ってる人いない？

初っ端から2時間超えの作ろうとしてて草
巷にあるDF動画なんてせいぜい5分程度がザラなのに
新規で5分の動画なら学習に24時間は覚悟するて聞いたらどんな反応するのか

顔の未検出、誤検出とかたくさんあったりして
手動でガンバレ