5ちゃんねる⇒ソフトウェア@5ch掲示板
設定
ダークモード
広告表示
画像・外部リンク

UPLIFT会員は外部リンクへ直接移動します。確認は初期設定でオンです。

機能のオン・オフ

このブラウザ・このサーバーのみ。オフにしても保存済みデータは残ります。

UPLIFT

1002コメント320KB

【質問】dfl【その4】

■ このスレッドは過去ログ倉庫に格納されています
垢版
返信 [2]
DeepFaceLab(以下、DFL)の質問&回答スレです

・質問について
日進月歩、モデルやオプションが多様化しているにもかかわらず、局所的な意見が散見されます。
必要に応じて自分の使ってるソフトやモデル、パラメータ等の詳細も書きましょう。

・エラーについて
エラーが出て解決できない場合は、なるべく詳細な情報(環境やどうしてそうなったか)を書きましょう。
特にエラー文は1番のヒントです。ググれば解決することも多いです。自分で解決できない場合はログを全文コピペしましょう。

・ソフトはどれ使えばいい?
利用者が多く情報が多いのはDFL。FSも英語圏では情報が得やすい。他は更新していない。

・必要スペックは?
VRAM容量6GB〜が推奨スペック。GPU性能は高い程いい。

・RTXシリーズでも動くの?
FS、DFL共に動く。

【質問】dfl【その3】
https://egg.5ch.net/test/read.cgi/software/1607860934/
垢版
返信 [2]
そのとおり
全く難しくないからやってみると良いと思う
成功したという人もいるけど、俺には無理だった
srcの前髪が常に同じじゃないといけないし、どんなにdstが上下運動しても前髪不自然に止まったまんまだし、とにかく輪郭が不自然
垢版
>>171
ありがとうございます
とりあえずやってみます
垢版
headのもやもや感が全然取れん
3060じゃパワー不足かな?
垢版
返信 [2]
全然更新ないなって思ってたけどこのソフトの作者ってロシア人なんだっけ?
垢版
返信 [1]
ロシア人だけど今も有名人のDF作るかオーバーウォッチで遊ぶかディスコでしょうもない質問してくる奴に対してキレてるだけで暇なのに細かい更新しかしてないから期待できないなw
垢版
返信 [2]
dst では閉じ目のシーンが、出来上がりを見ると半目になってしまいます
これを閉じ目にしたいのですが、何かいい方法ないでしょうか?

loss値は0.2くらいで、一応src5000枚のうち、200枚くらいは目を閉じてます
垢版
返信 [2]
LIAEだとマシになる程度
垢版
返信 [1]
>>176
ae dimsを上げるか、MVEでdstのランドマークをいじれば多分いける
垢版
返信 [2]
>>178
ae_dims初期設定の256からいじったことないんですけど、どれくらい上げれば変化分かるものなのでしょうか?
それと、ae_dimsってtrain途中で変えることできないんですが、初めからやり直すしかないんでしょうか?
垢版
返信 [2]
目を閉じたsrcとdstだけ集めて別にやる手もある それでも完璧にはならないけど
垢版
>>179
多分やり直すしかないと思います
aeは512位が良いのではないかと
垢版
目を閉じない問題は、私はsrc素材の1/3くらいは
目を閉じてる画像にしましたね
そもそも作る動画の内、半分以上は閉じてるので
がっつり増やしてもいい感じ
それで現状は納得してます
>>180さんの言う
個別でやるのは何度か試しました
かなり良い感じに閉じてくれるのですが
再び他のと混ぜて学習を始めると
すぐにうっすら目が開いてきてしまいました
個別でやる場合完全に作業を分ける必要が
ありそうです
少々手間ですけどね
垢版
返信 [1]
modelについて教えて下さい

例えばセクシーAのdstに真矢ミキのsrcでmodel maya1で作る。
その後別のセクシーAのdstで作る場合、前のdstフォルダだけ移動させておいて、新しいdstの作成→model maya2てな具合にするんでしょうか?
それともmaya1を使い回せますか?
またセクシーBでdst作りなおす際は、modelフォルダも作り直しになるんてしょうか?
垢版
使い回しても、名前を付けておけば
train時など選択できるようになっていますけど
私は作り直していますよ
あとから解像度だったり、segの学習だけ残して
また違う設定でやり直すとき楽ですから
垢版
ありがとうございます。
作り直しでいきます。
垢版
黒目の中の光(ハイライト?)あれはeyes pri〜つけてしばらく学習してれば光ってくるんでしょうか?
現状レ○プ目みたいになってしまいます
垢版
返信 [1]
eyes_mouth_prio
目と口元を優先して学習するのでそうですね
垢版
mergeした時に、たまにほんの小さなノイズが入ってたりするんですが何が原因なのでしょうか?
それとこれもたまに一部だけ色がおかしい(褐色系になってる)ことがあるんですが、こちらの原因も知りたいです

どちらも過学習とかなんですかね?
垢版
返信 [2]
dstのランドマークが微妙にグチャっとなってるとか
垢版
>>189
かなりブレてるdst使ったのでノイズの原因それかもしれません
ランドマークおかしいと肌の色も変になるんでしょうか?
垢版
xsegについてなのですが、srcとdstを分けて学習させる方法無いですか?
垢版
返信 [1]
srcもdstも色素薄い系の唇なのに、mergeすると蛍光ピンクの唇になるんだけど、唇の色味をsrcに近づける方法ないかな?
CTはtrainの最後の方だけオンにして、mergeはrctでやってる
垢版
返信 [1]
>>192
merge時の変換対象範囲にビビットな色が入ってるとcolor_transfer_modeによっては顔の中に色移りするよね mix_m とか
顔の中や近くに同じピンク色の物体あったりするかな?
rctなら問題なかったと思うけど、ちょっと前にmergeのrctに関する不具合改修入ってたような
垢版
>>193
近くにピンクなものは無いかな
train不足かと思ったけど、empオンにして0.2まで下がってるし、res192の限界なのかも
ganはまだ使ってないから、それやってみてダメだったらもう少し高い解像度でやってみる
ありがとう
垢版
返信 [1]
背景が暗い時とか明るすぎる時も顔の色に影響しておかしくなる事があるな
res416でもたまにsrcとdstの相性で起こるしtrainの回数とかでもなくてCTとmergeの設定が適してないと思う

train中のCTがrctならmergeの設定はnoneとか他の色に変える
merge中に「3 あ」キーを押してCTと組み合わせる(通常に戻す時は「1 ぬ」)
「P」と「;」キーでcolor degrade powerを調整して顔の色味を薄くする
バックアップがあるならtrain時はCT noneにしてmerge時だけCTを使う
他にも「2 ふ」のhist-matchに変えたりとかerode maskの値を下げたりとかmergeの設定をとにかく変えまくればどこかで自然になるはず
垢版
返信 [1]
xsegマスクとかで背景のド派手な色までマスクしていると
チークや唇がド派手な色になるね
マスクで1ドットでも拾ってしまっているとド派手になる
dst側で拾ってしまっていることが多い
垢版
顔全体において、目鼻口を少し上や下の位置にずらして配置する設定ってないんですかね
垢版
>>196
なるほど唇が真っ赤になってなんで?
って思っていましたが理由がわかりました
ありがとう
垢版
マージした時に小さいほくろみたいな斑点がでるんだけど、これってモデルが崩壊してるってことなの?
斑点は数枚出て少ししたら消える
垢版
返信 [1]
>>195
仕上がりの動画で顔がチカチカすると書いた者ですが

mergeの設定をlctにしてみたり
他にも書いてあるのをいくつか試していけば
改善されそうです
遅くなりましたが感謝です
垢版
圧倒的にsrc素材がたんないんだけどどうしてる?
金かかってもいいからブルーレイから動画切り出す方法教えて下さい
垢版
返信 [1]
makemkvでググって
垢版
返信 [1]
まじでありがとうございます
垢版
Lenovo Legion T770i を新規購入したのですがDFLがエラーで動きません
Error: Blas GEMM launch failed
というエラーが出てきます
タスクマネージャみるとGPUのメモリが全く反応していません
ベンチマークではGPUはきちんと稼働しているようなのですが…
垢版
それは大変だね
垢版
返信 [2]
情報が少なすぎるな
垢版
返信 [1]
すみません 情報追記です
【使用ソフト】DeepFaceLab_NVIDIA_RTX3000_series
【スペック】Core i7-12700K GeForce RTX 3070 LHR 8GB GDDR6

色々やってみてエラーが少なくなったのですが、以下の解決法がわかりません
ご教授いただけましたら幸いです
【エラー内容】
Process Process-16:
Traceback (most recent call last):
File 〜〜〜
MemoryError: Unable to allocate 3.00 MiB for an array with shape (512, 512, 3) and data type float32

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
File "multiprocessing\process.py", line 258, in _bootstrap
File "multiprocessing\process.py", line 93, in run
File 〜〜〜
MemoryError: Unable to allocate 3.00 MiB for an array with shape (512, 512, 3) and data type float32
垢版
>>166さんの
この書き込みとか参考になりませんかね?
垢版
仮想メモリ(ページングファイル)不足っぽいからDFLがインストールされてるドライブの仮想メモリを16384MBくらいに設定すれば直るかも
設定方法はググればすぐ出る
垢版
返信 [1]
>>202
まじではかどる。ほんとにありがとう。あとは真矢ミキにあう輪郭の持ち主教えて下さい。
垢版
ググった
面長だから篠田〇うでどうだ
垢版
篠田はゆったんで失敗して以来はずしちゃってた。ありがとう、ためしてみます
垢版
>>210
真矢ミキ推しいいねwそういう斜め上いくのいい

試してないからわからんが最近の妃ひかりなんてハマりそうだが

真矢ミキはロケットみたいな顔してるから篠田みうは合わなそう…
垢版
A4000からA2000-12GBに載せ替えてみた
SEAHDデフォ設定で回してみても学習速度ほぼ変わらず
学習中の消費電力はワットチェッカー値で200→115wまで削減成功。GPUコア温度も60℃までしか上がらんから夏場も安心して量産できますわ
垢版
補助電源不要って凄いね
電気代気にしなければ3090tiでも買いたいけど
450wとか無理過ぎる…
4000シリーズは900wという噂も
どこまで上がるのやら
垢版
そこまで行くと最早オーブントースターか暖房器具だな
垢版
むしろ電子レンジ
垢版
冬は暖房になるかなと思ったらそうでもないという
垢版
返信 [1]
作り始めて1週間だけどまあまあのやつできた。すごいソフトだわこれ。
垢版
resを段階的に上げてどこまで上がるか
試しているのですが368にして進めると
通常通り動くのですが、数値が352になって
しまいます
同じことが2度起こりました
基本は16づつ上げてみているのですが
何か間違っているのでしょうか?
垢版
32の倍数じゃないから?知らんけど
垢版
返信 [1]
まじすか
今日仕事なんで帰ったらやってみます
垢版
返信 [1]
trainオプションでdを使うなら解像度は32の倍数にしないといけない
dを使わないなら16の倍数で可
他にも32の倍数にしないといけない理由があったきがするけど忘れた
垢版
そんな法則があったのね
助かります
垢版
返信 [1]
その顔の角度はちゃんとsrcに結構な量あるだろって場面でも、上向き下向きの顔はブレブレになっちゃうのはしょうがないんでしょうか?
まだxsegとかのレベルにいたってないからなのか
垢版
返信 [1]
ちょうど同じ状況
上を向いている顔がボケてる
いましがたsrcで上向きの画像を3倍くらい
増やしたので、trainしながら様子見です
垢版
返信 [3]
dst / sec 共にランドマークとXsegマスク(のapply)がいい具合に設定されているかが重要だね
かなり角度の厳しい上向きだとランドマークがグニャっとしてたりマスクが真っ黒だったり
デフォルトはマスクの白部分のみを学習の対象にしてTRAINすらからマスクがしっかりしてないと幾ら回しても精度が上がらないね
垢版
ただトレインsaehdでまわしてるようなレベルじゃ変わり様なさそうですね。
もうちょい進んでから考えます
垢版
ブレるのは顔のextractが上手に出来てないんでしょう
どうせ上とか下向いてるのは誰だかわからないんだからalignedのファイル消しちゃうのも手
垢版
上向いてるポーズが好きなもんでデュフ
いずれは合わせられるようにになりたい。
ここにいる人達は眼中なしかもしれないけど、face-jappてーのはどうなんですかね。
垢版
ランドマークはすべて確認
下向きの構図のあごのラインが伸びている
箇所が数点あり修正
修正したもののあごと胸元との境界の色合いの
関係上、かなり境目が判別しづらいので
もう思い切ってすべてX-segでライン引き

上向きも同じように確認
ランドマーク数点修正
こちらは境目は問題なさそう
src画像で同じような上向き画像の枚数が少ないのと
角度的に同じものがほぼない(似てるものはある)
のが原因かと
比較的似ている構図のsrcを増やして対応してみます
垢版
返信 [2]
XsegTrain のソースを少し見ていてわかったんだけど
alignedフォルダ内に手書きポリゴンを設定した画像が一枚も場合、代わりに学習済みモデルからApplyされたマスク形状からTrainするようになってる
何の為の実装なのかわからないけど、例えばXsegGenericからApplyした後、Editorで目視確認して精度のいいフレームだけ集めて再Trainすると厳しい画角のマスクが安定するよ
垢版
返信 [1]
>>232
ごめんなさい ポリゴン設定が一枚もないときね
垢版
返信 [1]
勉強になる
XSegの精度を上げることができます
垢版
前髪込みで入れ替えようと色々試していますが
比較的顔が近くなると、どうしても
髪の色合いの違いが目立ってしまう
これ学習進めれば馴染んでくるものでも
ないですよねぇ…
垢版
自ら難しい道を進んだのだから、もっと訓練しなさい
垢版
返信 [1]
近所に自衛隊があるのですが
ゴールデンウィーク体験入学に申し込みました
訓練は怠りません
垢版
モザ有のフェラもので作ろうと思ったらモザイク部分にxsegマスクすれば上手くいくかな?
垢版
モザイクに沿ってXsegをする
ずっとやっているとモザイク掛けるのって大変
だよなぁ
とか思う
垢版
返信 [5]
中華サイトで万能Xsegとかいうのあったから共有
有料だったけどま、ええやろ
https://mega.nz/file/lg4x0TrZ#AeH5YV-4oahEJN7GpGWqMDFZEamTi_oqgugAxtI1u7Y
垢版
返信 [1]
すごいxsegだぁ…
垢版
>>240
ちょっと試してみたけどすごかったわありがとう
垢版
なんか凄い怪しいんですけど
そもそも万能XSedって何が万能なのか
書かないのも怪しい
垢版
怪しいと書いて失礼しました
中華サイトでは普通に議論されていた
もしかして中華のほうが盛んなのか
垢版
ジェネリックより良いの?
垢版
返信 [1]
700万くらいトレーニングされたデータだった
試しに使ってトレーニングしてみたら
量にもよるのだろうけどあっという間に終わった
垢版
万能なんだからトレーニングしなくても使えるのが売りだと思うぞ
垢版
返信 [4]
トレーニングしないでapplyすればいいのかな
ただ、あくまでもオーソドックスなマスクなので
前髪を含めたい時とかには使えない
あと、前髪が少しでもかかってる眉毛も
除外された
垢版
前髪含めたいって特殊な要望なんだからそりゃそうだろ
垢版
返信 [2]
試してみたいけどAlipayで買ったの?
垢版
返信 [2]
>>250
管理者に連絡してビットコイン支払いでポイントを買って、そのポイントで買った
ログボ的にポイントもらえるからかなり期間が必要だけど一応金払わなくても買えることは買える
垢版
>>250
上の無料で使えたで?なんで金払うん?
垢版
返信 [1]
いや、その上の人はどうやって手に入れたの?
って話しなだけだと思うのだが…
垢版
返信 [1]
復号キーが何か分からなくて自分で買わなきゃ使えないと思ってるんでしょ
それよりも同じサイトにあるfaceswapの顔抽出機能を元に改造してDFLの顔抽出速度を5〜10倍にできる切脸加速神器ってのが気になる
これは配布対策されてるっぽいけどもっと速く抽出したいからちゃんと使えるか試してほしいわw
垢版
顔抽出は速さよりも正確さがもっと上がると良いなぁ
headの精度は低いし、wfやfも口が手などで
覆い被さり眉、目、鼻だけになると精度がガタ落ちする
中華連中なら作ってくれそうな気がする
垢版
返信 [2]
下からの顔とか集めても肝心の顔抽出くんが認識してくれなかったりするんだよね
垢版
中国人ってエロに積極的だよな
垢版
返信 [1]
>>240
ありがたく使わせてもらったけど素材によっては口の中までマスクされて歯が3重になっちゃうな
mergeだけで使ったからapplyしてからtrainすれば変わるかな?
垢版
自分が普段使ってるデータ使ったほうが良くない?
700万トレーニングだと修正に時間かかりそう

俺の場合試しに使ったけど眉毛除外されちゃうから
結果的に自分のデータ使ったよ
日本人はsrcモデルもdstモデルも眉毛に前髪が
被ってるのが多いから
もうそれごと入れ替えるようにしちゃってる
垢版
返信 [1]
修正もなにもそのまま使う前提のmodelじゃないの
垢版
返信 [2]
手動設定のXsegマスクのポリゴンはMVEのブラシ/消しゴムツールで簡単に微調整できる
自分はGenericモデルからApplyした白黒マスク形状をポリゴンに変換してaligned画像に書き戻すスクリプト作ってMVEで編集しているよ
垢版
返信 [1]
スクリプト組む知識ないでござるよ(´・ω・)

ちなみに最近は処理能力を犠牲にしてでも
解像度上げることに挑戦しているのだけれど
アップシーンでも違和感のないresの数値って
どのくらいなんだろね
320でもアップになると違和感バリバリ
垢版
返信 [1]
処理能力つか処理速度か
垢版
返信 [1]
どうしてもアップにしたいのはresは384で元動画を敢えて720にしてる
480でスマホで見るのもありかも
垢版
いつもres384でdst720pにしてるけど画面いっぱいにアップするシーンだと720pのdstにres416とかでものっぺりするし
3090でもres512くらいだからDFLだけだと厳しいな

ちなみにdstを480pまで下げると画質が荒すぎて顔のパーツが認識しづらくなるからか結果の顔の品質も悪くなる気がするんだけどdst側も全部GPEN使えばもっと仕上がり良くなるんかな?
垢版
返信 [1]
なるほどあえてdst側を下げて、極力違和感を
少なくするわけですね
にしても3090って24Gですよね?
それでもいいとこ512なのか

GPENって以前だれかが紹介してくれたけど
ボヤけた画像に使うとシャープさが強すぎたので
以来、使ってないなぁ
通常レベル(と自分で思える)画像に対して
味付け程度に使うものではないのかな?
垢版
返信 [1]
250なんだけど、みんなの会話のおかげで勘違いしとったことに気づいた。
ありがとう
で、今まで面倒なんでxseg手出してなくて使ってみたらすごいな
まだ微妙だがぶっかけうどんも作れるようになったし、可能性広がったわ
この万能xsegより、ぶっかけうどん用のって知ってる人いないですか?
垢版
返信 [1]
>>261
該当の機能だけに特化させてソースを整理したら100行程度におさまったので興味のある方は参考にどうぞ٩( 'ω' )و

https://i.imgur.com/025cEOS.jpg

https://i.imgur.com/Xd2NpcV.jpg
垢版
返信 [1]
>>268
ちなみに起動方法は以下になりますね

①261のソースコード「MyXsegUtil.py」を_internal¥DeepFaceLab¥mainscriptsに格納
②_internal¥DeepFaceLab¥main.pyの末尾付近に以下画像1のコードを追加
③DFLルートフォルダに「任意ファイル名.bat」として以下画像2を作成
④XsegApplyからポリゴン情報に変換したい画像のみをworkspace¥data_dst¥alignedに格納
⑤ ③で作成した「任意ファイル名.bat」を起動
⑥上書き保存されたaligned画像のポリゴンを公式EditorやMVEで気に食わない部分だけ手動調整する

https://i.imgur.com/0jHs4CH.jpg

https://i.imgur.com/u1LyRCo.jpg
垢版
返信 [1]
>>269
なかなか上級者だなあ
気に入らないランドマークを手動で動かせるってことであってる?
本家のgithubにプルリク?しておけばいいんじゃないか
垢版
返信 [2]
>>270
>気に入らないランドマークを手動で動かせるってことであってる?
認識あってます、が動かすのはランドマークでなくXsegマスクのポリゴンの各頂点ですね
Genericモデル等からApplyしただけのマスク形状をGUIで微調整できるツールは自分が知る範囲では無かったので、これを公式EditorやMVEで編集可能なポリゴン情報に変換するのが268の役割です
268の⑥の作業をMVEのブラシ/消しゴムツールで行ってるイメージが以下画像です
Genericモデルでは髭はマスクされませんがMVEの消しゴムツールで髭をマスク対象に追加することも簡単ですね

https://i.imgur.com/LyXap8Y.jpg
■ このスレッドは過去ログ倉庫に格納されています

ニューススポーツなんでも実況