フレーム補間可能なソフトウェア総合

フレーム補間可能なソフトウェアスレです
以下現在無料有料問わず使えるソフト一覧です
これ以外でもフレーム補間可能なソフトならなんでも書き込んで構いません

●フレーム補間を行えるソフトウェア

1.SmoothVideo Project (SVP)
2.Fluid Motion
3.DaVinciResolve
4.Rife-App
5.Topaz Video Enhance AI
6.TMPGEnc Video Mastering Works 7
7.dmitrirender
8.Splash
9.RE:Vision Twixtor v7（プラグイン）
10.Adobe premiere pro

rife app
公式のサンプルみたいにヌルヌルにならん

VEAIのフレーム補間が高速化されて以前より使えるようになった
実写だとかなり自然で違和感ないね

個人的にリアルタイム再生はAviSynth版SVP4Pro、
レンダリングならDaVinciResolve、次点でVEAIって感じかな

MEMCのフレーム補間技術がPCの汎用プレイヤーでも使えるようになったらまた変わるだろうけど

>>21
グラボにMEMCが搭載されないとね

24fpsや30fpsで保存されていても、実際は8コマ、12コマしかない動画を
滑らかにするのに一番適してるのってなんですか

>>22
Andoroid版SVPはスマホ初のMEMCプレイヤーらしいし、ハードウェアなしでもいけるみたい
ただ使用料とかありそうだし無料ソフトとしては出ないだろうけどね

>>23
一旦動画編集ソフトで実際のフレーム数まで間引いて出力→それをフレーム補間するのがよい

相当な手間掛かりそうだけど、みんなそれやってるのか
映像編集の道茨杉

flowframe
ファイル複数選択出来ないの不便だな

>>24
いや無理だよ MEMCでの補間もできるってだけでMEMC非対応の端末は普通のSVPと同じように補間してる

>>27
右上の歯車マークの隣のプラスマークでバッチ処理出来ますがそういう意味ではなく？

これってそういうもんだったのか
初めて知った
tnx

ずっとFlowframesの方使ってて、一昨日からRife-App買ってみたけど随分違うもんだねえ
RIFEのどのバージョン使ってるのかな？って気になったけど、そもそも
https://itch.io/t/1809998/rife-app-or-flowframes
今はもうRIFEの素のコードをそのまま使わず、完全独自に自分で一から学習させたモデルを作って実装してるみたい

逆にFlowframesはかなり素直な形でRIFEの実装してて、有料版だと今はバージョン3.9が使えて以前より処理速度だいぶ早くなってる
とはいえ出力FPSの直接指定の機能とかはないし、そもそも根本的に使ってるモデルも違う以上
ソースに合わせて上手く併用出来るのが一番かも

このバッチ処理のUIは、ファイル数多くなるとどこまで選んだか分かんなくなるな

VEAIは処理が早くなれば、高解像度化とフレーム補間の両方を一つのソフトできるようになるから期待度が高い
更に言うとその二つを一緒に処理できるようになったら神

4Kまでアップするならビデオカードはどのクラスから必須ですか

>>26
ネットなんかだと実際は30fpsなのに無駄に60fpsになってる動画とかよくあるよね
無料ソフトだとAVIUTLならワンクリックで再生時間維持したままフレーム半分にして書き出してくれるよ

>>34
リアルタイム再生の話？
そうでなくレンダリング補間ならソフト次第かな
VEAIとかは少ないVRAMでもいけるけど、動画編集も兼ねる場合は4Kは8GBが必須ラインになってくる

15fpsも60fpsも変わらんな・・・

https://i.imgur.com/uH8x8xu.mp4
以前別スレに貼られてたものだけど、7枚の静止画をDaVinciResolveのタイムラインに配置してその間をフレーム補間した動画。
賢くないソフトだとフェードインアウトで誤魔化したりするけど、これは間の足りない絵を生成しているのがわかりやすい例だと思う

>>38
面白いな
やっぱ実写より2次元系の方が得意なのか

flowframes
2時間くらいの動画だと最初のpng出力が300GB超えるんだけど
作業スペースどんだけあればいいんだこれ

作業用のHDD一本用意すればいいだけのこと

寝てる間も横でガリガリうるさくない？

すぐに気持ち良くなるよ

HDDじゃ流石に遅すぎない？
SLCキャッシュ切れた後でもそれなりに速度出る様なNVMeが理想的だと思う
そういうの探すと大抵PCIe 4.0の高めの奴になっちゃうけど、しかも場合によっては冷却の追加コストまでかかったり

1TBのNVMe SSD欲しい

>>44
お前のPCはHDDの速度より速くフレーム補間できるのか？

まぁPC性能にもよるがNVMeSSDがベストなのは事実
PNGは処理が重いけどBMPなんかで書き出すと明らかに違いがわかる

価格も普通のSSDと変わらなくなってきてるしそういう作業が多いなら買うべし

>>46
HDDの読み書きと変換は同時にやってないから

>>48
それなら尚更ストレージの速度なんて誤差の範疇と言えるな

もうお前の中では誤差ってことでいんじゃね

SSDの方が良いのは確かだけど、リタルタイム再生以下の変換作業でHDDだからって速度は落ちんよ
前はポスプロ勤務だったけどRAID含め映像作業はほとんどHDDで、SSDなんてシステムとXDCAMやらレコーダーの一部使用だけだったし

最低でも「時間」場合によっては「日」「週」オーダーの補間計算に対して
ディスクIOなんて精々「分」オーダーだから誤差としか言いようがない
誤差じゃないと主張するなら相応の根拠を用意すべき

いや、主張は「誤差ではない」ではなく「遅すぎる」だったか
尚更説得力のある説明が欲しいね

質問です。Davinciでフレーム補間してます。30fpsを60fpsにするのは問題ないのですが、29.97fpsを60fpsにすると動画の長さが微妙に狂って音声ともずれてしまうんです
59.94fpsにするのならずれる事なく何も問題はないのですが、60にしても動画の長さを狂わさずそのままの長さにピッタリと指定することはできるのでしょうか

無理言いなさんなよ…
手動でやるなら差分のフレーム数を等分等間隔で間引くとかしてやればオリジナルの音声と合いはするだろうけど変なカクつき出そう

>>19
もしも24fps動画を2倍にしてる場合だと48fpsの滑らかな動画になってても60Hzのモニタでは滑らかに再生出来ないですよ。

4倍にしてから60fpsに落とすとかなりマシに、8倍→60fpsだともっと滑らかになりますよ。
(倍率上げると時間かかるし破綻も増えますけどね。)

RIFE APPだとx3やx5も使えるので24fpsものはx5→60fpsが良さげに思います。
(1080pならmedium、720pならhighが無難？)

こうやれば比較的うまくいく的なテンプレ欲しい

元々8コマしかないものを24fpsにしてるアニメはどうしても無理有る動きになるか

>>38は自然に見えるけどなぁ

>>59
全フレームが動いてれば良いんだよ
アニメの場合、1フレーム動いて2フレーム停止だから
8倍で取ると8フレームぬるっと動いた後16フレーム動かいの繰り返し
明らかにがくかくｑｑ

>>60
それで>>25,26,35が必須なわけね

テンプレ追加案

どのソフトウェアを使用する場合でも同様だが（リアルタイム変換でも事前変換でも）、24fpsや30fpsで保存されていても実際は8コマや12コマしかないアニメの場合（動画プレイヤーの一時停止＋コマ送り機能により確認できる）、一旦動画編集ソフトで実際のフレーム数まで間引いて出力→それをフレーム補間する方がよい。

例：24fps保存の12コマアニメを120fpsにフレーム補間する場合

A. 素（24fps）
1フレーム動く（直前のフレームからの変化あり）→1フレーム停止（直前のフレームと同一）→1フレーム動く、、、

B. Aをそのまま120fps化
5フレーム滑らかに動く→5フレーム停止→5フレーム滑らかに動く、、、

C. Aを12fpsに間引き
1フレーム動く→1フレーム動く、、、

D. Cを120fps化
10フレーム滑らかに動く→10フレーム滑らかに動く、、、


BとDを比較すると、Bは動いて・止まってを繰り返すのでカクカクだが、Dは常に滑らかに動く。

例えば、フリーウェアのAVIUTLなら、目標fpsを入力するだけで再生時間を維持したまま書き出してくれる。
・メインメニューの「設定」→「フレームレートの変更」から目標fpsを選んでエンコード。
・上で目標fpsが選択できない場合、メインニューの「編集」→「再生速度の情報を変更」を選択し、「フレームレート：」に目標fpsを入力してエンコード。
画質を劣化させたくなければ、Ut Video Codec Suiteなどの可逆圧縮CODECがおすすめ。

GPUメモリ4GBだと30フレーム以上に出来ないな
共用GHPメモリあるけど使ってくれないし

>>54はDaVinci Resolve使ってるならクリップ属性変更するだけで普通に音ズレなしの任意のfpsに変換できるっしょ

補足するとクリップ属性での変換はPremiere Proでいうところの「フッテージの変換」と全く同じだよ
ドロップフレームを使用するか否かのオプションもこの中にある

個人的に、Ut Video CodecはAVIUTLで動画編集を完結するならそれもありだけど、ストレージ容量を膨大に使うし、他のソフトでは使えない事が多々あるので、マスターとして保存する用途なら視覚的にロスレスなコーデックを使うことをお薦めするよ
MacならProRes、WindowsならDNxHR、CineFormなど
これらのコーデックは編集時に軽いので中間コーデックとしてもよく使われてる

>>62の訂正
>・上で目標fpsが選択できない場合、メインニューの「編集」→「再生速度の情報を変更」を選択し、「フレームレート：」に目標fpsを入力してエンコード。
は間違いです　削除でお願いします

コーデックが10万円以上…プロ用ですね…

>>64
ホンマ。や普通にできるじゃん
あちこちいじり過ぎるのも良くないなって…

>>68
ProRes/DNxHRは大抵動画編集ソフトやカメラ機材に付いてたりするし、CineFormはオープンソースよ

あ、そうそう>>64のクリップ属性で変換しても例外的に音ズレが起きるものもあって、それはスマホで撮影した動画ファイルなんかはこれで解決できない場合もある。 その場合はもうプロキシか最適化ファイルを生成してからタイムラインに流しこむしかない、
っていうかこの先はDaVinci Resolveスレで聞いてもらったほうがいいだろうね

アニメは辛いな
キャラクタが8コマ、背景が24コマとか無理ゲー

キャラに合わせればいいのでは？

その場合、背景の2/3を捨てて補間フレームで補うことになる
それにキャラの方もカットが変わったら8fpsの周期も変わったり変わらなかったりするんで、
フレーム数を単純に1/3カットしたら切るべきじゃないフレームも切り捨てることになる
付け加え、特定のカットだけ12fpsや24fpsフルでキャラが描かれることもあるから、それも切り捨てることになる

24fpsや30fpsフルで常にキャラが動いてるようなものならともかく
放映アニメの大概に当てはまるリミテッド・アニメーションのフレーム補間はナンセンスよ

ならもう手作業でフレームを選別するしかないんじゃないんですかね？

>>74のやりたいことを完璧にやろうとするなら、たぶん一旦全部静止画出力して、全く同じ画像だけ抽出→削除するツール（SimPix等）を使って間引くのが一番手っ取り早いかもしれないね

あーでもその間引いたフレームが2フレなのか3フレなのか不確定なのでタイミング合わせはむずいか
リミテッドアニメーションは動きの溜め時間は静止してたりするもんな

8コマでフレーム補間すると、特に口の動きが滑らかになるね
24コマのままだと「確かに変化はあるが、補間が効いているのか分からない」という感じ

AVIUTLで8コマに削減すると画面全体が破綻を起こす動画も多いが


手作業による選別は、
全フレーム静止画出力（24枚/秒）→フレーム1枚ごとに、フォトレタッチソフトの自由選択ツールなどを使って、手作業でキャラを背景から切り取る→「キャラだけの静止画（背景があった位置は透過色）」「背景だけの静止画（キャラがあった位置は透過色）」それぞれを動画化（8fps＋24fps）→できた動画それぞれを補間処理→それぞれの補間済み動画を全フレーム静止画出力（60枚/秒）→対応するフレームのキャラと背景を合成→合成画像を動画化
という感じかね
切り抜きを1枚10分で済ませたとしても、25分もの1本で1000時間以上かかりそう…

無料だとrife ncnnが最良なんだろうか

flowframes 1.32.0 のRIFE(cuda)がRX590とGTX1660TiのマルチGPU環境でGTX1660Tiのみを選んでもCPUのみで作業される。
RIFE-APP2.8の方は普通に動くのに・・・

flowframes 1.32.0でRIFE(NCNN)はRX590とGTX1660Ti両方同時に使って動作しました。

音質向上目的でMajiorityClean、RewriteDataという2つのツールをインストールしたら、SVPの破綻がはっきりと分かるレベルで減ったわ

興味のある人は、この辺を参考に試してみるといい
https://nobidara.blogspot.com/2021/03/howtousebughead.html
https://ameblo.jp/tone-123aaa/entry-12560776076.html
※MinorityCleanをMajiorityCleanに読み替える

なお、sexeへのMajiorityCleanの登録は必須なので注意（作者が「PC再起動時は再度の実行は不要」と言ったのを、解説ページの筆者がPC電源オフ時も不要だと勘違いしているだけ）


とりあえずMajiorityCleanの常駐（＝sexeへの登録）と、MPC-HCのインストールフォルダだけにRewriteDataの適用を行ったが（SVPのインストールフォルダには使わなかったが）、それでも明確な破綻軽減効果が出た

ちなみに、MajiorityCleanは、よくあるユーティリティーソフトの「メモリクリーナー」のレジスター版らしい

連投ｽﾏｿ
公式ダウンロードページはhttp://www.mics.ne.jp/~cdorya/MajiorityClean/

何度もｽﾏｿ
>>81の訂正
×MPC-HCのインストールフォルダだけにRewriteDataの適用を行ったが
○MPC-HCのインストールフォルダ＋MajiorityCleanのインストールフォルダだけにRewriteDataの適用を行ったが

MajiorityCleanにもRewriteDataを適用する必要があることに注意

SmoothVideo Project (SVP)　part5
https://egg.5ch.net/test/read.cgi/software/1626958395/

胡散臭いソフトだな

だいぶクセの強い作者のようだが、ソフトはの効果はプラシーボではないの？

察してやれよ
>音質向上目的

動画の編集始めたばっかなんだけど
この沼深過ぎでは？
ていうかゴールどこ？

ゴールは人によって違うし、ソフトも進化を続けるから、また新たなゴールができたりする

>>88
現状は廃スペPCにTwixtor Pro(8.5万円)買えばゴールなんじゃないかね
お値段的な意味で…

結局何でもtopazで良いやってなってきた

topazはアニメのアプスケノイズとりには結局どれがいいんだろう。
結論出せずにいるよ

なんの疑問もなくアルテミスでやってたけど、他の可能性ってあったのか

VEAIはProteusが万能

proteusみんな言うほど良さが分からん

1人2人が盛大に言ってるだけかもしらん
何かと言い切る人多いしね

場面の切り替わりで崩れるのってどうにかならんのかな

Skip scene transitions

AVIUTLとかでシーンごとに切り分けて、それぞれフレーム補間してから再度つなぐのはダメなの？
全く違う絵柄の2シーンを一連の1つのシーンだと誤解するせいで崩れるんだろうし

>>97
Flowframesだとシーンチェンジを検出して前フレームを繰り返すか、次フレームとブレンドするか選択するオプションがあるね
検出精度も選択できるけど、完璧に検出できるとは思わないほうがいい
検出漏れは少ないけど、激しく動くシーンとかだと余計な検出が発生する

flowframes1.36.0でFLAVR使おうとすると短い動画以外はメモリ不足で実行できないのですが、FLAVRを1時間とかの動画に使えてる方居ませんか？

VEAIのフレーム補間、仕上がりが自然だから気に入ってるけど、4Kになるとめちゃ時間かかるな・・・
素直にDaVinci Resolveでやればよかった

>>93
artemisのどれかでいいっぽいですね。テストしてみて一番いいのを選ぶのがいいみたい
そしてセル画アニメや3DアニメはDehaloが無難ですねやっぱ

Davinciのwarpspeedでフレーム補完してるんですけど、インスペクタのリタイム&スケーリングなんですけど、
カットの編集モード時に、
・左上メディアプールの素材メディア（音符マーク）
・左上メディアプールのタイムラインに追加したメディア（フィルムマーク）
・そして下の編集タイムラインの帯
このそれぞれで別々にインスペクタ設定の入力が出来る事に気づきました
warpspeedのインスペクタ設定が必要なのは下のタイムライン帯だけでいいんですかね？もしや無駄に左上のメデイアプールの設定弄ったら仕上がりが悪化したりしますかね…

>>104
カット編集は使ったことないのでわからんけど、タイムラインに配置した映像クリップにOpticalFlowとスピードワープ適用するだけよ

アニメ1話で大体1.5日
先は長い
ビデオカード欲しくなるけど高くて手が出ねえ

TMPGEncにフレーム補間実装されてたのか
知らんかったTHX

>>107
正直使えないくらいいまいち

例えば、人物には、まず「頭＋胴体」があって、そこから髪の毛や手足などが生えている。
多くの場合、髪の毛や手足などは、それぞれバラバラに、「頭＋胴体」とは別の方向に動く。

で、フレーム補間では、
・まず「頭＋胴体だけが残って、髪の毛や手足などが潰れてしまうくらい解像度を下げた画像」を、元画像から生成。

・その「低解像度画像」で動きベクトル検出を行うと、頭＋胴体の動きが分かるが、髪の毛や手足などの動きは潰れているので当然全く分からない。

・元画像（高解像度画像）で動き検出ベクトル検出を行うと、髪の毛や手足などがそれぞれバラバラな方向に動くため、それらに影響されて全体（頭＋胴体）の動きが分からなくなる。

このため、低解像度画像での動きベクトル検出と、元画像（高解像度画像）での動きベクトル検出をブレンドして動きを検出する。


低解像度のブレンド比率を高めると、全体（頭＋胴体）の動きをより正確に検出できるため、より滑らかに補間できてヌルヌル感が増すが、髪の毛や手足などが破綻する（輪郭線がウネウネする）。

一方、高解像度のブレンド比率を高めると、髪の毛や手足などの破綻が生じにくくなる代わりに、全体の動きがバラついてヌルヌル感が無くなる。

つまり、フレーム補間では、この「破綻の生じやすさ」と「ヌルヌル感」のトレードオフになる。

上手いソフトウェアだと「破綻が生じるシーンだけヌルヌル感を下げ、それ以外はヌルヌル感重視」で処理してくれるが、下手くそなソフトウェアだと常に「破綻が生じ、かつ、ヌルヌル感もイマイチな状態」になってしまう。


もし、人力で動画をシーンごとに切り分けてから、このトレードオフの調整を、人が目視しながらスライダーなどをドラッグするだけで行えるソフトウェアができれば（基本はスライダーを左に振り切っておくが、破綻が生じるシーンのみ、破綻が生じなくなるギリギリの所までスライダーを右に動かす等）、プロのアニメ制作現場でフレーム補間が普通に使われることになるはず。

シーンの切り分けなんて色塗りで普通にやってるし（シーンごとに切り分けて、ある画像の一ヵ所をクリックすると、他の画像の同じ位置も一気にまとめて色を塗ることができる）、制作コストはさほど増えないのにも関わらず、目視による手作業により極限まで破綻無しでヌルヌル化できる。
古いアニメもデジタルリマスター程度のコストで破綻無しでヌルヌル化できるし。

良いビジネスになると思うので、誰か暇な人は作ってみてはいかがか。

長すぎて読んでないけどニューラルエンジンなら全部解決するっしょ
ってかDaVinciのMagicMaskとかその類だし

あとプロのアニメ制作現場でフレーム補間、というか中割自動生成はもう使われているし、近い将来作画職人は残っても動画職人は危ういといわれてる

で、エンコードミスした動画が放送されると

>>90
Twixtor持ってるけど、最近のAI使った補完と比べると全然使えないよ
補完部分がガビガビ

補完したフレームにモーションブラーも追加できると自然になるなぁと思ってるんだけど
FlowBlur-App（はイマイチなので）以外でモーションブラーを付けられるソフトって
誰か知りませんか？

フレーム補間とノイズ除去アプコン学んで良かった。3Dエロアニメがすっごい事になっとる

これってDaVinciだよね？
https://youtube.com/watch?v=Uk-PmVtTHVk&;t=54s

すごいなぁ…

やっぱりフレーム補間はリミテッドアニメには向かんな・・・
グニャグニャしてる

マクロスは補完無い方がいいな

>>108
早速試してみたが確かに使い物にならんかった
オプティカルフローの速度重視/品質重視の2種類あるが品質重視でもキャプションなんかはことごとく破綻する状態
改善を期待したいが作者はこの辺にはあまり注力してなさそう