【技術】たった1枚の画像から「奥行きがあり視点を前後左右に動かせる3D画像を生成する方法」が開発される [すらいむ★]

たった1枚の画像から「奥行きがあり視点を前後左右に動かせる3D画像を生成する方法」が開発される

　近年は立体的で奥行きがある「3D画像」を生成する技術が大きく進歩しており、新たにFacebook AI Researchとカーネギーメロン大学の研究者が、「奥行きを再現して視点を前後左右に動かすことも可能な3D画像を、たった1枚の画像から生成する方法」を発表しました。

　Worldsheet: Wrapping the World in a 3D Sheet for View Synthesis from a Single Image
　https://www.researchgate.net/publication/347442173_Worldsheet_Wrapping_the_World_in_a_3D_Sheet_for_View_Synthesis_from_a_Single_Image

　Worldsheet: Wrapping the World in a 3D Sheet for View Synthesis from a Single Image
　https://worldsheet.github.io/

　以前から奥行きを感じられる画像を生成する技術はいくつか開発されており、2019年9月に「カメラが動いているかのように視点が動く画像」を生み出す技術が発表されたほか、2020年4月には「1枚の画像から複数レイヤーを含む奥行きを演出する3D画像」を生成する手法が発表されました。

　そして新たに、Facebook AI Researchとカーネギーメロン大学の研究者が「Worldsheet」という手法を発表しました。
　この手法では、視点を従来よりも広範囲に動かせるだけでなく、3D化に伴う画像の乱れも少ない3D画像を生成できるとのこと。
　実際に新たな手法で生成された3D画像やその仕組みについては、以下のムービーで紹介されています。

（以下略、続きと動画はソースでご確認下さい）

Gigazine 2021年01月05日 06時00分
https://gigazine.net/news/20210105-single-image-synthesis-3d-sheet/

貧乳写真が巨乳3Dに

>>2
3D貧乳になるだけだ

違いが判らん

>>1
画像歪ませてちょっとアングル変えただけじゃんｗ

こういうパターンの画像だったら、3Dにしたらこういう風になるんじゃね？
と学習させまくるわけね

そして教師画像にない奴を見せてもそこそこそれっぽくなったと

AI使ってネット上の画像から補正かけろよ

コレだとどうせ横からとか裏からとかは見れない

裏側考慮してなくて木が流れてるじゃん

やり直し

応用すればアニメ作成も楽にできそう

奥行き情報を付加するだけで、見えない部分を推定したりするわけじゃないのね

Google ストリートビューみたいだな。

スカートの中が見えたら起こしてくれ

六角大王の進化形か

つまり昔懐かしいウィザードリーの迷路のようなタイプの画像なら奥行き生成できると
ストリートビュー向けの技術だねえ

歪みねえ

>>8
何にでもケチをつけるだけの馬鹿が現れた

VRを使えば
絵や写真の世界に入れる感じか

>>2
わくまゆさんがこのスレを監視しています

俺 脳で出来る！

ディープラーニングの精度が学習でどれだけ上がるかだろうな

フサに見えるのか(´・ω・`)

メッシュ配置して
擬似的に3Dにしてるだけで目新しさは全くないが…
何か違うのか

学習に2D画像のみでいけるのが良くわからん
同じ被写体で多方面からの２D画像食わせてるの？

Google Earthとかでは便利そうだな。

もうストリートビューでぬるっと遷移するとこでよく見てる技術な気がするｗ　

「JPEGより優れた画像形式が誕生した。JPEG2000だ。10年後にはJPEGより普及している」
って言ってた人達は今どこで何をしてるのかな

ttps://worldsheet.github.io/
ケーキの画像で、
novel view2をインプットにした場合、
input viewみたいな画像は得られないでしょう？

つまりケーキの上面の情報が無いわけだから。

まあまあ上手くいく画像はすごく限定的な気がする。

グーグルアースの3Dで似た感覚になった気がする。
あれだって2D写真から3Dを模擬しているんでしょう？

移動させてるだけか

>>3
3D貧乳ワロ

スカートの盗撮不要な時代になるな。

20年以上前からある写真から立体データを作る技術を
自動でやってくれるってことかな

>>22
自分も感想としては同じだな
それほどすごくないと言うか
前にも合ったような気がする感じ

ウィンドウズに似たようなアプリが入ってた

なんでもかんでもAIAIで人類はまた一つ能力の進化を放棄した感じがするな
そのうちAIに認識してもらわないと立体視すらできなくなるんじゃないか

AIAI
AIAI
おさるさんだね〜

GIMPとかでパースペクティブや３D加工した画像をコマ送りしてるだけ
じゃないのか

これまでの映画も
普通のテレビ映像も
これで全部かんたんに３Ｄ化だな！

なんてな

画像から
ひとかたまりのものごとに画像を切り抜いて
距離の違うものの画像を何枚か重ね合わせたもの、みたいなデータにして
視点を前後させたら、画像ごとに拡大率を変えながら拡大
視点を左右させたら、画像ごとに移動距離を変えながら移動
みたいなことをやれば、それっぽいことはできそう

ただジャングルジムみたいなもの
遠いところにある地点と近くのところにある地点が両方ちらちらみえるようなもの
はどうなるかな？

アイドルから裸体を取り出せる技術はよ

まあ見えてる範囲を人間と同じように想像するだけだよね
脳を模してるんだからできて当たり前のような…

超解像と組み合わせれば見栄えは良くなるかもね

ブレードランナーで見た

裏に回ったら見えてない部分はどうなるの？

びんぼっちゃま状態だろｗ

この動画のナレーション、フランス人かな？
英語がフランス訛りに聞こえる。俺は英語出来ないけどｗ

ペンローズの階段を読ましたれ。

エロ絵師全員vtuberになれるやん！

こんなんより、個人使用に限ってのディープフェイク解禁してくれた方が
よっぽどタメになると思う

>>30
微妙な凹凸が再現されるんなら萌えるな。

なんちゃってVR空間を即席で作るのに有用そうだが

やっぱりエロは人類を飛躍させる起爆剤

拝啓、善良なる読者の諸君へ、
これはアニメの背景を作るのに役に立つかもしれんな。
一枚それらしい背景画を駿が書けば、
その手前にいるキャラクターと共にカメラが連続的に回り込んで
映したような映像を撮るのには、背景もそれに伴って連続的に
パースを正しくとりながら変えて行く必要がある。

車庫入れのときの鳥瞰ビューは、レーザーを使って3Dモデルを作ってそこに映像を貼り付けて歪みが無いリアルな画像にするだろうと思っていたが、これならより低コストでできそうだな。

GANの応用かな
三次元レイヤーと画像をそれぞれ学習させて
贋作をつくる要領で画像と三次元レイヤーを比較させながら3D画像を生成していくのだろう
考えとしては簡単だけど個人だとGPUとか金かかりすぎるのがなぁ

とっととAVの登場人物をワンタッチで入れ替えられるレベルになって欲しい

2Dの紙に描かれたマンガのキャラの画を沢山集めて総合すると、
AIが自動適に3Dのモデルを作成してくれるとか、あるいは
2Dの技法で描かれたアニメのフィルムを自動で分析して
3Dのより立体的なアニメの動画に変換するとか、
そういうことをしかねないのがこの技術の延長線上にあるな。

グーグルマップの3Ｄ表示みたいな感じだね

>>53
駿は背景美術書いてる訳じゃないぞ
ブラッシュアップさせてるのは美術監督の男鹿和雄とかだ

モノラル録音の音源から、ステレオやさらに音場が広がった演奏を
擬似的に創り出す技術はいちおうある。

特殊メガネを掛けてみれば、街は道にゴミ一つ落ちていないし、
自分の家は広大な御屋敷に見えるし、妻も絶世の美女。
そういうシステムが発売されるかもしれないな。