【質問】dfl【その3】

DeepFaceLab(以下、DFL)の質問&回答スレです

・質問について
日進月歩、モデルやオプションが多様化しているにもかかわらず、局所的な意見が散見されます。
必要に応じて自分の使ってるソフトやモデル、パラメータ等の詳細も書きましょう。

・エラーについて
エラーが出て解決できない場合は、なるべく詳細な情報(環境やどうしてそうなったか)を書きましょう。
特にエラー文は1番のヒントです。ググれば解決することも多いです。自分で解決できない場合はログを全文コピペしましょう。

・ソフトはどれ使えばいい？
利用者が多く情報が多いのはDFL。FSも英語圏では情報が得やすい。他は更新していない。

・必要スペックは？
VRAM容量6GB〜が推奨スペック。GPU性能は高い程いい。

・RTXシリーズでも動くの？
FS、DFL共に動く。

>>74
headはそもそも頭部全体を切り抜くってアルゴリズムだから余白が多いのが当然だろ
head＞Whole＞full＞harfで範囲が小さくなるんだから変更するしかないんじゃない？

>>75
そりゃそうだが縦幅の半分近く無駄にしている。
おかげでVRAM馬鹿食いの割に低解像度。
もうちょっと何とかなりそうだと思うが。

head最強だよな　まんま本人に仕上がる

3080Tiが無期限延期になってしまった
3090にせざるを得ない

ReadyToMerge model 良さそうだね

ときにみんなどこいったの？解散？

俺はここにいるぞ

ReadyToMergeモデルってのはごく少ないtrain回数で高品質なマージができるって意味？
特別なプログラムがあるわけじゃなくて、効率的なtrainのやり方って感じかな。

RTMmodelはパターン豊富なsrcとdstにPretrain用データを使って事前に十分学習させとけば、本番のdstで全く学習せずにいきなりmergeしてもいい感じに合成できるよってことで合ってる？

モデルの使いまわしを1つのsrcだけで効率よくするって感じか

>>77
headって、背景やsrcとdstの髪型に気を遣って
AAEとかDavinci Resolveで後処理しないといけないんでしょ？

>>85
確かに背景と髪の境界線は多少ちらつくので気になる人は映像処理するといいかも。
自分は我慢できる範囲。そこはデメリットかな。ちなみに顎と首の境界線はｗｆ同等なので
だいじょうぶ。マスクはｗｆよりかはxseg-editの枚数増える感じ。なによりもｄｓｔ関係なく
本人そっくりになるのがメリット。

>>86
ふだん、耳・前髪・横髪含む前頭部とメガネ残しでxseg-editして、wfで回してるんだけど
趣旨考えるとやっぱりheadに移行したほうがいい結果いなりそうだな
xseg-editも髪の残す境界に悩まず全部マスクできれば枚数増えても逆に楽になるのかな
寝てる時とかの逆立ち毛や、長髪についても抽出した画像内では全部頭部としてマスク内に残してやってる？

てかヘッドってsrcの髪型も揃えるんよね？
resなんぼでやってる？
224とかじゃ小さ過ぎるか

髪は長髪でも頭部としてマスクしています、さすがにすこし乱れているのまでは
カットしてますが。ｘｓｅｇが思ったよりすごくて、長髪でもちゃんと学習してぴったり
合ってくるのは驚いた。マスクはｄｓｔもｓｒｃも両方必須ですね。ｒｅｓは448です。
ｍｒにあるpretrainモデルもｈｅａｄだと少ししかないのであまり選択の余地はないですね。

>>89
448は俺のpcじゃ無理だ！
GPUは3090ですか？

>>89
ほうほう
fでそれなりに満足できてたけどheadに手を出してみたくなった

headて短髪インタビューじゃないと厳しいかなと思ってたんだが凄いな
マスク処理、448のトレイン
作るのにどれくらいかかるんや...

1660sでは無理そうだな・・・

>>90
gpuはそうです。ｗｆで満足したかったが、ｄｓｔの相性が悪いのか、モデルが似なかったので
やむなくですね。

俺の3080(VRAM10GB)ではres352のbatch4でギリギリ回る
res448なら16GBは最低必要だろうね
8GBのグラボでSLIを組むか、3060の発売を待つか、3090がいいだろうね。

2080tiどころかTITAN Xでも怪しいくらいか
3080tiは凍結っぽいし現状は3090になるな
Vramもメモリ増設くらい簡単に増やせればいいのに

これのために3090買えてマスクに時間かけられるやつがどれくらいいるかだな...
使えるシーンも限定されるだろうし

>>96
TITAN RTXならアリだね、
パソコン工房で14万で販売されてた形跡がある
演算速度は3080に負けるらしいけど、14万なら魅力的。

>>89
情報ありがとう！やってみてダメだった時の徒労感が嫌で忌避してたけど
headでやってみる気力がわいてきた！

>>95
1080ti(11G)でliae-ud、res384、ae等デフォ、batch5は行けそう
adabelief切ればres416ならどうかなっても思ったけど、切る気にはならなかった。

mrにはheadであと　320と240の　pretrain済モデルがあるので
自分の環境に合ったので試してみるといいかも。

なんかみなさんResが高いですねえ
いけるのか？

>>96
VRAMとかは基盤に直付けで無いと、低速なのかな
メモリだけCPUのメインメモリも使うと、遅くなるんですかねえ

モデルの使いまわしをしてるんですが、プレビュー上のグラフ表示だけリセットする方法ってないですか？
まぁ気にするなって話なんですが

たしかに気になるw

俺は高解像度だとプレビューの顔画像が1個になるのを何とかしたい

フォーラムに上がってるジェネリックxsegの使い方がよくわからないんですが
modelフォルダに突っ込んでマージするだけでsrcとdstにはxsegマスクを
特に必要とせず済むように使うためにあるんですか？
それとも5.XSeg.optional) trained mask for data_src - apply等を実行して
srcやdstに適応してからまたxsegのtrainをしてやる必要があるんですか？

やってみれば良いんじゃないの
恐らくフォルダに突っ込んどけばマージは出来る
でもapplyした方がtrainの効率は良いだろう

顔入れ換える系のこれより、ひんむく系の方が画質悪いけど興奮するわ

違う?

>>108

ひんむく系は今どっかあるの？

>>2のフォーラムのtools and appsに前から専用スレッドがたってる
スタンドアロンツールとオンラインサービスがある
オンラインのやつはコツ掴めば中々すごい画像を生成する
解像度が600*600と低いが..

現状解像度低いから、興奮するのかも知れんが
顔入れ換える系は高解像だから、顔にあったボディをしっかり選ばないと俺の脳は受け付けないのかもしれん

すみません
headで学習してますが、いざmergeSAEHD実行してもdstの顔しかでてきません
dstもsrxもheadで切り抜いてます。
対処方法教えてくださいませんか

pretorainモデルの使い方がわかりません
普通に実行するとdstとsrcとは違う外人の顔がでてきます

trainの下準備みたいなもんだから、その知らん外人でtrainするのがpretrain

ありがとうございます。
pre trainの効果は、トレインが早い、角度に強くなるであってますか

>>110
どれのこと言ってるの？
顔入れ替えと服脱がすやつしかなくないか？

>>114
ありがとう

pretrain用のpakの中身は「自分が過去に使ったsrc/dstを適当に混ぜた物」と入れ替えるのお勧め
loss値じゃなくて、previewでキツい角度や表情がキレイになる位まででおｋ

aedimは512にしてますか？
pretrain見るとあんまりしてないからそこまで重要じゃないのかな

aedims512でadabelief trueにするとbatch size1でもtrain始められなくない？

pretrainではなく普通のトレーニング済みモデルってどこかにありますか

捕まりたいのか

だからみんなpretrainでアップしてるのか
pretorainの効果って今一つわからないのですが、結局Iter1から自分でやるんですね
train時間短縮で使いまわせらたと思ったのですが

ガイジランドへようこそ！

pretrain無しで一から回してみればいいと思うよ
未実装だった頃は200k回してやっと何となく見れるレベルって感じだった記憶がある

いろんなsrc、dstを混ぜて、Trainモデルをアップすれば、
誰が誰だか分からない平均顔？
捕まるかな？

Mask Editorで画像を確認するとき、一気に画像を飛ばすキーとか無いですかね・・？
3万枚とか、ずーっとDボタンを押しっぱなしで確認するのしんどい。
解像度1024だと送りのスピードも遅いし。

shiftDでちょい速くなる程度か
最後の方だけ確認したい時なんかは前半の画像を別フォルダに逃したりしてるわ

3080と3090どっち買うか迷ってるんだけど、同じ設定で比べると時間的にどのぐらい差がありそう？

メモリが多いとbatch数増やせるから
その分trainは早く終わる
1070無印から3090に載せ替えたけど
3〜4倍のbatch数で動いたよ
cudaコアも5倍なのでかなり速くなった
寝る前にtrain始めて起きたら完成していると言ってた人がいたけど
自分も同じ感じ
3080は持っていないのでわからない

プレビューでdstの顔向きをsrcが追従してくれません
src不足でしょうか

だろうね

どうせすぐ飽きるから1050で

adabeliefは最初からtrueでいいのかな

オフにする意味がないよね

>>130
ありがとう！その早さは魅力だなぁ。
と同時に飽きるから安いのでいいというのもまた真理。悩む。

グラボ更新ついでに最新版にアプデしたらプレビューが5×5マスでなくて、
srcの2×2部分しか表示されなくなったんだけどそういう設定かなんかあります？

>>128
さんくす！
Shift+D知らんかった。
あと、他のフォルダに移せばいいってのも盲点やった。

すみません。
headをためしてますが、プレビューで顔が崩壊してます。
xsegでもっと枚数範囲指定せんとダメでしょうか

オレもhead挑戦中
まだ途中だが、プレビューで崩れた顔が出てくるので、Xsegに戻ってeditしながら再train中

基本的には短髪スーツのオッサンがスピーチしてる動画しか想定されてないから…
余程src/dstの条件が一致してかつ、正面に近い物しか無理

まじですか
じゃ、一般的に騎乗位とかのエロはWFがいいのですね

ちょっと前までf一択みたいな風潮だったのにいつの間にかwf〜headがメインになってるな

fしか使ってないわ
日本の女性アイドル使ったheadの完成品があれば見てみたいわ

AVでは難しいだろうけど命知らずの馬鹿は好きだ

>>143
スマホとかのfirmwareみたいに、常に最新が良いと思いがちなのかも
要は用途に適した環境が大事な気がする　自分は最新も確認しつつliaechでrawが多い

headなら、顔の輪郭まで持ってけそうだと思ってやってるけど、まだmergeまで行ってない。
ま、最近忙しくて、作業を進められてないのが原因だけど。
df faceのmodelなら３人作ったし、結構短時間で新作作れるけど、顔の輪郭で不満が残る場合があり…

顔の輪郭までならheadである必要もないかと思う
>>146でも書いてあるけど新しいバージョンが上位互換というわけでもないし
おでこに髪がかかるようなsrcはfを使うのがベストと作者も言ってた気がするし、fから進めない

自分も眉毛の下でmaskするからextractはwfだけどarchiはずっとfだな
ただheadだと輪郭前髪ごと移植できるみたいだから気にはなってる

こういう場合に、気楽にアップできないのがつらいな。

せやな
headがどれくらい補完できるか気になる

3070で顔の切り抜きの速度1.2it/sって普通なんですかね？なにか自分の設定が悪いのでしょうか

それで普通
extract faceはGPUもCPUも全然性能使い切ってくれないから遅い

色々試してみて感じたのは
DFLの最大の弱点は顔抽出の精度
Xsegみたいにユーザーの手動検出を元に学習とかできないのかな

DFLそんなに遅いのか...

顔検出の精度低いって、ちんこ重なってると駄目なん?

口が隠れてると手動での検出すら厳しくなるね
2年ぐらい使ってるけど、この辺は一切進化してない
作者がいじれない所らしい

そっか
ちんこが問題かw

3pとか2人以上の顔の差し替えを同一動画で作るのは
どういう手順で作ってるんでしょうか？

予想だけどA,B両方抽出してBのalignedとdebug消してAをXに変換→result出力
そのresultからX,Bを抽出してXのalignedとDebug消してBをYに変換
みたいな流れじゃないかな

src(芸能人)は小顔で目が大きい→dstは顔が大きく目が小さい→trainでdstのlandmarkサイズを基準に学習→マスク外のサイズが微妙になる…

>>161
mergeのときに顔のサイズ変えられるでしょ
Jを押して大きくしてみては

それはmask内部の事…サンクス

輪郭に合わせるとなんか巨頭オみたいになって違和感バキバキの時あるね
特に上から見下ろすシーンが気持ち悪くなる気がする

自分も時々起こるので、対策が知りたい。
ｄｓｔのマスクが大きくて、ｓｒｃが小さいので、Ｊで大きくして間を埋めようとすると
頭でっかちになってしまう症状。あごと首のラインのところでおかしくなるんだよなあ。
rawで出力してdavinciresolveで合成するとかなりましになったので、起こったときの
対策はとりあえず、そうしている。

後は、fullfaceのrect範囲(赤枠)の大きさがmanualでも小さい場合も多い　特に横顔とか口を大きく開けてる画
headとかだと素材の制限が増えて違うし

>>153
そうなんですね。ありがとうございます

謎の3060は明日発売か

貞松はマジでdfl殺しだなぁ

3060はコア性能が2060s以下だとわかったため
3000スレはお通夜になっている

遅ればせながらhead試してみた
髪の色と長さが合っていれば本人そのものを再現できてよいですね・・・
ただ、やはり先人のコメントのとおり注意点、制限も

・同一ソースからのsrc抽出が必要
（複数ソースだとsrcの髪型に一貫性がないため、mergeしたときに髪の毛が薄く生えたり
　濃く生えたりする箇所が出てきて変になる）
・動きが少なく正面シーン中心じゃないとmergeが滲みやすい

head試してたんだけど、train200万回近く回してもクリーチャー顔がいくつか残り、いまいにはそれが増えだしたから一時凍結したわ

肩弱い奴はハメ撮り止めちまえ！顔見切れすぎブレすぎ枕使わないから角度煽りすぎ

つ 全編超広角