フレーム補間可能なソフトウェア総合

フレーム補間可能なソフトウェアスレです
以下現在無料有料問わず使えるソフト一覧です
これ以外でもフレーム補間可能なソフトならなんでも書き込んで構いません

●フレーム補間を行えるソフトウェア

1.SmoothVideo Project (SVP)
2.Fluid Motion
3.DaVinciResolve
4.Rife-App
5.Topaz Video Enhance AI
6.TMPGEnc Video Mastering Works 7
7.dmitrirender
8.Splash
9.RE:Vision Twixtor v7（プラグイン）
10.Adobe premiere pro

flowframes1.36.0でFLAVR使おうとすると短い動画以外はメモリ不足で実行できないのですが、FLAVRを1時間とかの動画に使えてる方居ませんか？

VEAIのフレーム補間、仕上がりが自然だから気に入ってるけど、4Kになるとめちゃ時間かかるな・・・
素直にDaVinci Resolveでやればよかった

>>93
artemisのどれかでいいっぽいですね。テストしてみて一番いいのを選ぶのがいいみたい
そしてセル画アニメや3DアニメはDehaloが無難ですねやっぱ

Davinciのwarpspeedでフレーム補完してるんですけど、インスペクタのリタイム&スケーリングなんですけど、
カットの編集モード時に、
・左上メディアプールの素材メディア（音符マーク）
・左上メディアプールのタイムラインに追加したメディア（フィルムマーク）
・そして下の編集タイムラインの帯
このそれぞれで別々にインスペクタ設定の入力が出来る事に気づきました
warpspeedのインスペクタ設定が必要なのは下のタイムライン帯だけでいいんですかね？もしや無駄に左上のメデイアプールの設定弄ったら仕上がりが悪化したりしますかね…

>>104
カット編集は使ったことないのでわからんけど、タイムラインに配置した映像クリップにOpticalFlowとスピードワープ適用するだけよ

アニメ1話で大体1.5日
先は長い
ビデオカード欲しくなるけど高くて手が出ねえ

TMPGEncにフレーム補間実装されてたのか
知らんかったTHX

>>107
正直使えないくらいいまいち

例えば、人物には、まず「頭＋胴体」があって、そこから髪の毛や手足などが生えている。
多くの場合、髪の毛や手足などは、それぞれバラバラに、「頭＋胴体」とは別の方向に動く。

で、フレーム補間では、
・まず「頭＋胴体だけが残って、髪の毛や手足などが潰れてしまうくらい解像度を下げた画像」を、元画像から生成。

・その「低解像度画像」で動きベクトル検出を行うと、頭＋胴体の動きが分かるが、髪の毛や手足などの動きは潰れているので当然全く分からない。

・元画像（高解像度画像）で動き検出ベクトル検出を行うと、髪の毛や手足などがそれぞれバラバラな方向に動くため、それらに影響されて全体（頭＋胴体）の動きが分からなくなる。

このため、低解像度画像での動きベクトル検出と、元画像（高解像度画像）での動きベクトル検出をブレンドして動きを検出する。


低解像度のブレンド比率を高めると、全体（頭＋胴体）の動きをより正確に検出できるため、より滑らかに補間できてヌルヌル感が増すが、髪の毛や手足などが破綻する（輪郭線がウネウネする）。

一方、高解像度のブレンド比率を高めると、髪の毛や手足などの破綻が生じにくくなる代わりに、全体の動きがバラついてヌルヌル感が無くなる。

つまり、フレーム補間では、この「破綻の生じやすさ」と「ヌルヌル感」のトレードオフになる。

上手いソフトウェアだと「破綻が生じるシーンだけヌルヌル感を下げ、それ以外はヌルヌル感重視」で処理してくれるが、下手くそなソフトウェアだと常に「破綻が生じ、かつ、ヌルヌル感もイマイチな状態」になってしまう。


もし、人力で動画をシーンごとに切り分けてから、このトレードオフの調整を、人が目視しながらスライダーなどをドラッグするだけで行えるソフトウェアができれば（基本はスライダーを左に振り切っておくが、破綻が生じるシーンのみ、破綻が生じなくなるギリギリの所までスライダーを右に動かす等）、プロのアニメ制作現場でフレーム補間が普通に使われることになるはず。

シーンの切り分けなんて色塗りで普通にやってるし（シーンごとに切り分けて、ある画像の一ヵ所をクリックすると、他の画像の同じ位置も一気にまとめて色を塗ることができる）、制作コストはさほど増えないのにも関わらず、目視による手作業により極限まで破綻無しでヌルヌル化できる。
古いアニメもデジタルリマスター程度のコストで破綻無しでヌルヌル化できるし。

良いビジネスになると思うので、誰か暇な人は作ってみてはいかがか。

長すぎて読んでないけどニューラルエンジンなら全部解決するっしょ
ってかDaVinciのMagicMaskとかその類だし

あとプロのアニメ制作現場でフレーム補間、というか中割自動生成はもう使われているし、近い将来作画職人は残っても動画職人は危ういといわれてる

で、エンコードミスした動画が放送されると

>>90
Twixtor持ってるけど、最近のAI使った補完と比べると全然使えないよ
補完部分がガビガビ

補完したフレームにモーションブラーも追加できると自然になるなぁと思ってるんだけど
FlowBlur-App（はイマイチなので）以外でモーションブラーを付けられるソフトって
誰か知りませんか？

フレーム補間とノイズ除去アプコン学んで良かった。3Dエロアニメがすっごい事になっとる

これってDaVinciだよね？
https://youtube.com/watch?v=Uk-PmVtTHVk&;t=54s

すごいなぁ…

やっぱりフレーム補間はリミテッドアニメには向かんな・・・
グニャグニャしてる

マクロスは補完無い方がいいな

>>108
早速試してみたが確かに使い物にならんかった
オプティカルフローの速度重視/品質重視の2種類あるが品質重視でもキャプションなんかはことごとく破綻する状態
改善を期待したいが作者はこの辺にはあまり注力してなさそう

>>116
やっぱアニメはパンがスムーズになる程度の補完で十分やな
グニョグニョで破綻しまくりだし何よりキャラの動きの緩急がおかしいし

アニメはVEAIのフレーム補間がグニャらないのでいい感じだが、処理時間がかかるのがなぁ・・・

https://youtu.be/HbFeGL4Eoi0
DVDリッピング(SDソース)
"TMPGEnc Video Mastering Works 7"にてインターレース解除＆エンコード
"Topaz Video Enhance AI"にて4Kアップコンバート
"Topaz Video Enhance AI"にてフレーム補間

一度やってみたかったので。

https://www.youtube.com/watch?v=e6pxeEXNelw

この動画見て疑問に思ったんだけど、Youtubeって120fpsで再生できるの？

>>123
どう見ても60fpsです本当にありがとうございました

右クリックから統計見れるができないんじゃね

>>122
VEAIのフレーム補間は、効果も副作用もすごく穏やかなんですね

>>122
ドラムのスティックがしなってる

https://youtu.be/pzutTQq7mag
DVDリッピング(SDソース)
"TMPGEnc Video Mastering Works 7"にてインターレース解除＆エンコード
"aviutl + Avisynth"にてフレーム補間
"Topaz Video Enhance AI"にて4Kアップコンバート

違い出ますか？

ダビさんが動かん

>>119
オプティカルフローが使えなさすぎて単純補間の方がマシっていう

ｵﾌﾟﾃｨｯ･･ﾌﾞﾗｧｱｱｽｯ!!

Flowframes使ってみたんだけど、pngにばらした後のCUDAの処理でフリーズする

Flowframes1.29から1.32に変えたら問題なく動いた

FlowframesとRIFEってどっちがいいの？
アニメと実写それぞれで

アニメは何でやっても微妙じゃね
元が8コマで1コマ動くごとに2コマ停止するから補間に向かない
背景は24コマでスクロールして、人物が8コマ、文字が停止のシーンは
何してもぐちゃぐちゃだった

FlowframesはRIFEとかDAINとかFLAVERとかを選んで使えるGUIみたいなもんだよ
実写で色々やってみたけど、結局RIFEが一番フレーム補完が上手いかなって感じだし
売られてるRIFEだけのやつも買ったけど、設定値が違うのか若干結果が違うだけで、ほぼ同じ。
実写だと殆ど差が無いけど、やっぱVEAIが一番補完が上手いかなと感じてる

アニメはそもそも作り手が意図したコマ数に合わせて作画してるんだから
それを補完する必要無いと思うんだけどなぁ
OPだけヌルヌルにしたいとか、面白がってやるのはわかるけど

手間を減らすためにコマ数を減らしてるんであって、意図して減らしてるわけじゃないよ

だからその減らしたコマ数に合わせてコマ打ちしとるという話し

フル3Dアニメは補間やる価値あるけど、セル画アニメは破綻しないようにするほうが大事だと思う、コスト削減な中割作画とかあって当たり前なんだから本編そのものを補完する必要性は微妙だよね
OPEDはやる価値あるってのは同意

お前ら「アニメは補間いらねー」
トムクルーズ「映画は補間するな」

俺は何を補間すりゃいいんだ

ヌルヌルは茶の間でもベッドでもすぐ飽きる

アニメは補完した方が見易い
映画はくそ安っぽくなるからなし

あえて途中を描かずに速さを表現してるアニメに補間は適さない
実際やってみたら妙なタイミングでグニャるし

滅多に破綻しない&ファイルに手を加えなくて良いFluidMotionがやっぱ神だな
消え逝く技術なのが悲しい

>>144
「カッ！」「カッ！」「カッ！」「カッ！」ってストップモーション（静止画）続きのシーンが
一気に破綻したことあったのを思い出した

アニメはパラパラ漫画の前提で描かれてるから補間とは相性が悪い
映画は60fpsで撮れるけど24fpsの方が好評って理由でわざと24fpsにしてるんだからこれも無意味

まあやるとすればソースが30fpsとか60fpsの場合かな

無理に人物とか補完するんじゃなくてカメラワーク？だけヌルヌルにするようにして見易くしてるわ

そもそも補間は自己満足。
上手くいってもどうせ全編は観ないし、そもそも既に一度観たものばかり。好きにすればよい。
ただ、上手くいったら方法は教えろよな

人の目には何が違うのかわからんがぐにゃんと破綻するところ出るるなー

ストップモーションアニメと実写を合成したMV(15fps)を60fps化して面白いのが出来たから観てよ
https://www.youtube.com/watch?v=riOsdMLC0ck

オリジナルはコレのDVD版(720p)
https://www.youtube.com/watch?v=h2KeY43O5_U

4Kアップスケールはコレ用にAI学習させたんで、たぶん世界最高品質

ええやん
学習方法はGAN？

そうそう。簡単に言うと、フレーム補完と全体のアップスケール自体はVEAIで
顔の部分だけGAN（正確には違うかも）的なAI補完した精細な画像を重ねてます。
実際はもっと複雑、というかもっと工程が多いけどね

>>145
RX480はマイニング需要で高いしね
5600Gとか買えばいいんだっけ

>>3に書いとる。5XX0Gが古井戸使える最後の製品だな

何で廃しちゃうんだろ？高速で補間できてるから成長が望めそうなのに

今Ryzen3600とRTX2060なのですが、
CPUをRyzen5600Gに交換してもRTXからモニタへ映像出力してるなら古井戸は使えないと言う認識でいいんでしょうか？

大丈夫、使えるよ

メルカリメルカリうっせぇから片っ端から通報するわ

ミス

試しにうちでnvidiaグラボつけててFluid Motionを5700Gで使おうとBluesky Frame Rate Converter入れてもGPUの所がグレーアウトしてて選べないんだよね

うちは5700G+6600XTだけど6600XTにつなげたTVに古井戸かかった動画出力出来てるよ

>>162
APUの方のマザーの映像出力には何も刺してない状態ですか？
それとAPUのドライバは最新です？

>>163
APUはDPでサブモニターに繋げてる（ほとんど電源オフ状態）
ドライバは常に最新
デバイスマネージャーかAMDのドライバで5700Gがちゃんと機能してるか確認しよう
うちはマザーのせいかもしれないけどAPUが起動時エラーで機能しなかったのでUEFIでAPUを優先にした
GPUの選択はあくまでも古井戸が機能する物を選ぶこと、出力したいGPUを選ぶのではない
Blueskyの設定の一番下にある「Zero-copyモードを有効にする」はチェックを外さないと駄目←重要
こんなとこかな

>>164
詳しくありがとうございます
デバイスマネージャーでグラボもapuも認識されています
違いはapu出力には何も刺してないのと
apuをプライマリにしていない事、
それにblueskyのgpu選ぶ部分がグレーアウトしてて何も選べない事です

デバイスマネージャーで問題ないならプライマリにする必要はないかも
これはうちのおま環だと思う
あとはAMD Softwareでビデオだかなんかのタブ開いてカスタムにすることくらいかなぁ
会社から書いてるんでその辺確認できないわ
Blueskyに必要なランタイムが足りてないとかかも？

https://i.imgur.com/Ov3h7tI.mp4
DaVinci Resolve（スピードワープ）がいかにして静止画間の絵を生成してるか、これがめちゃわかりやすいね

RIFE 3.0の変更点って何？

>>167
絵の勉強したことない人ほど分かったつもりなこと言う現象ってなんていうの？

しったか現象

>>167は数秒間で1コマだが、1秒間8コマや24コマのごく短い間隔で同じような補間を行ってくれるのって凄くね？

>>167のやつは9枚の静止画をタイムラインに配置してその間をAIに補間させてる
賢くないAIはクロスフェードでごまかしたりするがこれはちゃんと生成してるよな

クロスフェード（ブラー）って、インターレース解除と同じだよね
前後2枚を足して2で割るだけ

Rife-App使ってみたけどGPUの負荷が凄くて怖いな
効果はまあ満足なんだけど

>>174
DaVinciResolveで60fps化ワープもっと負荷すごいし重いよ
でもグラボ遊ばせてるよりフルパワー処理に使ってくれる方がいい

DaVinci Resolveのスピードワープすげえ重いね
GPUパワー(RTX2070S)使い切ってこんなに時間かかるのか…
完成したファイルはたしかにヌルヌルだけど
安いラデのボード追加してリアルタイムで評判いいFluid環境にするか迷うな

どんぐらいかかったの？

2Dアニメ(24fps)をTopaz Rife Davinciでやってみたけど
Topaz一強でしたわ
アプコンも優秀だし凄いわホント

FlowframesでGPUを1660Sから3060に載せ替えたらどうもGPUで処理してない感じで
全然進まないのですがなにかFlowframesでも設定変えないといけないですか？
GPU交換前は普通に動いてました

アプリ再インスコで自決でした

死なないで

Flowflamesを使っています。
AVIファイルを補間した際に
容量が20倍近くになってしまいます。
容量を抑えたいのですが
解決する方法はありますか？

できればMP4で出力は避けたいです。

CODECにCineForm（オープンソース）を使えばいい
不可逆圧縮だが劣化を視認できないのが売り

>>183
ご教授有難うございます。
「Encoding Settings」 → 「AVI:Codec / Color Format」の選択肢で合っていますか？
自分の環境(オンボード UHD Graphics630)では
CineFormという項目が出てきませんでした。

FlowflamesにCineFormは無い
ファイル形式がmkvでいいなら
MP4/MKV: Video Encoderでh265を選択する(h265 QSVがあればそちらの方が少し画質は落ちるがとても変換が速い)
MP4/MKV〜: Color Formatをyuv420p10leかyuv420pを選ぶ。推奨順はyuv420p10le＞yuv420p
MP4/MKV: 〜(CRF)の値を調整する。低いほど品質が良いので、デフォ値で満足できないなら2〜4ずつ下げて試す

Flowflamesのaviで変換できるのは可逆圧縮か無圧縮なんで容量は膨らむし視聴用途向きじゃない

CineFormは動画編集でよく使うが、あれってGoProStudio入れないと入手できないんじゃなかったっけ

>>185
返信感謝です。お陰様で、容量を肥大化させず
更に画質の劣化を避けるという目的が達成できました。

MP4/MKV: 〜(CRF)の項目は、値を変えても
自分には画質の変化はよくわかりませんでした。
デフォルトで大丈夫そうです。
教えて頂いて有難うございます。

>>186
https://freesoft.tvbok.com/movie_encode/lossless/gopro-cineform-codec.html

>>188
それそれ
結局GoProStudio入れないとダメなのは相変わらずか
おまけにリンク先切れてて入手がさらに面倒になってるな
一応GitHubにCineformのSDK配布してるところはあるが、コンパイルしないといけなかったはず

RIFE-App動かしてる時にふとタスマネ見たらHDDがほぼ100%でCudaは行って20%なんだけどさ

これってもしかしてSSDにしたら出力速度がもっと早くなったりする？

RAMdiskの方が良くない？

昔の640x480動画を何とかする場合、
フレーム補間→超解像→色調等補正
っていう順番が正しいの？
それとも超解像は一番最後？

>>192
60fpsにすると超解像にすげえ時間かかるから俺は逆だわ

解像度に関わらず以下の処理順でやってる

色調補正とかインタレ解除とかデノイズとかの不備修正系編集
↓
超解像
↓
（出来を見て必要ならシャープネスとかノイズ足したり微調整）
↓
フレーム補間

aviutlでRGBA出力した背景透過のaviとかmp4なんだが
RIFE-Appのエクスポート設定でアルファチャンネル付けてフレーム補間した後にaviutlでアルファチャンネル読み込んでもエラーになる
誰かこれ普通に読み込める人いる？
もしいるなら自分の設定が悪いんだろうって線引き出来て助かる

https://modelinghappy.com/archives/44627

なんか新しいフレーム補間ソフトが来た
どんなソフトでも使えるみたいだが使った事ある人いるかな？、

勘違いか、URL間違い？
Flowframesなら>>4にも書いてあるぞ

flowframes1.38.0　
NCNN/VS使うと1.5倍くらい早くなった

IFRNet
https://github.com/ltkong218/IFRNet

IFRNet ncnn Vulkan
https://github.com/nihui/ifrnet-ncnn-vulkan

IFRnet、自分が試した限りではRIFEの4倍近く時間かかったけど品質はIFRnetの圧勝だな