探検

【京都大学】ATRと京都大学、fMRIで測定した人間の脳活動のみから、その人が見ている画像や心の中でイメージした内容の画像化に成功

■ このスレッドは過去ログ倉庫に格納されています
2018/01/14(日) 23:13:39.25ID:CAP_USER
ATR（国際電気通信基礎技術研究所）と京都大学の研究者らは、
fMRI（機能的磁気共鳴画像法）によって測定された人間の脳活動のみから機械学習を用いて視覚像を再構成する提案を論文にて発表しました。

本稿は、人間が見ている画像を、fMRIで測定した脳活動パターンのみで知覚内容を視覚化する機械学習を用いた手法を提案します。

提案手法では、画像を見る被験者からfMRIで測定した脳活動から、
画像の視覚特徴パターンを予測するよう学習したデコーダを用いてDNN（Deep Neural Network）の信号パターンへ変換します。
そして、DGN（Deep Generator Network）を組み合わせて画像を生成します。

これらのことで、人間が見ている画像に類似した画像を脳活動の情報から高いレベルで生成することを可能にしました。
以下の映像では、左に見ている画像、右に出力した画像が映し出されます。

心の中のイメージも画像化に成功
また、心の中でイメージした内容を画像化することにも成功しました。手法は上記と同じです。

上述では、見ている画像を再構成しましたが、今度は一度見た画像を記憶し、
画像を見ていない状態から心の中でイメージする脳活動だけで再構成するというものです。
被験者には、関連付いている単語と画像をペアで記憶させ、その後、単語を提示し画像を想起させました。

以下の映像では、その結果を確認する事ができます。左に記憶した画像、右に再構成した画像です。

画像：（左が見ている画像、右が再構成された画像）
http://shiropen.com/wp-content/uploads/2018/01/ezgif-4-1082d57d21.gif

図：本提案手法の概要。
http://shiropen.com/wp-content/uploads/2018/01/Deep-image-620x525.png

関連動画
Deep image reconstruction: Natural images https://youtu.be/jsp1KaM-avU
Deep image reconstruction: Visual imagery https://youtu.be/b7kVwoN8Cx4

Seamless
http://shiropen.com/2018/01/14/31458
2名無しのひみつ
垢版 |
2018/01/14(日) 23:17:25.33ID:o+5ummIP
これが実用化されたら、人間関係がメチャクチャに壊れそうな予感が･･･
3名無しのひみつ
垢版 |
2018/01/14(日) 23:20:27.30ID:i/K5OXtQ
　

　　＿ﾉ乙(､ﾝ､)＿↓キャー、変態！変態！↓
4名無しのひみつ
垢版 |
2018/01/14(日) 23:21:59.46ID:LpvRaVUH
えーー凄いな
5名無しのひみつ
垢版 |
2018/01/14(日) 23:22:55.62ID:E26Wle+u
電車でみた胸チラとか帰宅してPCに繋げばもう一度見られる訳か！
2018/01/14(日) 23:25:19.33ID:5mUD9R71
サヴァン症候群の人いたら盗撮状態になるんじゃないかなｗ
7名無しのひみつ
垢版 |
2018/01/14(日) 23:26:46.66ID:lo2wKvXL
オレは歩いている女を完全に裸にして視る事ができる
8名無しのひみつ
垢版 |
2018/01/14(日) 23:27:47.44ID:qdEpFNdy
児ポ見た奴はバレて逮捕な
9名無しのひみつ
垢版 |
2018/01/14(日) 23:28:06.08ID:PjoT9r/Q
>>1
１０年程前から定期的に出て来るよな、この研究
2018/01/14(日) 23:29:51.43ID:o/Fxv6SB
これAI使ってるってこと？
2018/01/14(日) 23:33:47.34ID:XUI+wu9N
画像、これで「高いレベルで生成」なのか？
1つの写真を見ていても色々出まくって何がなんだか分からないが…
12名無しのひみつ
垢版 |
2018/01/14(日) 23:37:48.58ID:/xHLcSKe
ATRにしてはかなりレベルの低い研究成果だな
DeepLearningの素人による研究だわ
13名無しのひみつ
垢版 |
2018/01/14(日) 23:38:41.63ID:QB6dk8XS
ATRと聞いて割れたゲルマニウムがフラッシュバック
謝罪と賠償をorz
14名無しのひみつ
垢版 |
2018/01/14(日) 23:41:11.34ID:USyePS/o
男性は知らない。すべての女性がやっていることを。
http://www.geocities.jp/xdud_0407/0114.html

「結婚はエラい、子供がいればもっとエライ」と思う人へ...4ページのマンガが話題
http://www.geocities.jp/xdud_0407/011116.html tr
15名無しのひみつ
垢版 |
2018/01/14(日) 23:41:32.24ID:USyePS/o
男性は知らない。すべての女性がやっていることを。
http://www.geocities.jp/xdud_0407/0114.html

「結婚はエラい、子供がいればもっとエライ」と思う人へ...4ページのマンガが話題
http://www.geocities.jp/xdud_0407/011116.html
16名無しのひみつ
垢版 |
2018/01/14(日) 23:42:12.37ID:gUwDlJSi
ディープラーニングつえぇえええええ！
しこしこやってる職人系研究者は死亡
17名無しのひみつ
垢版 |
2018/01/14(日) 23:43:39.19ID:jUw1YYnL
> 心の中のイメージも画像化に成功

あの娘を四つん這いにさせて後ろから！はあ！はあ！

あなた！

ギクッ！

そして画像がネットに晒されるのであったｗ

ネットは広大だわｗ
2018/01/14(日) 23:47:37.59ID:SLpGsjZB
今までやった女の子の映像が
全部映し出せるとか胸熱
19名無しのひみつ
垢版 |
2018/01/14(日) 23:47:44.56ID:rIoDJont
これさ和月に使ったら幼女の画像がでてくんの?
2018/01/14(日) 23:58:30.75ID:HjiK+ZbB
エロでやればよりいっそう
21名無しのひみつ
垢版 |
2018/01/15(月) 00:01:05.82ID:osCfCqSw
右の画像だけで金魚イメージできるかと問われたら
それはむりだろ。
実験は失敗してる。
22名無しのひみつ
垢版 |
2018/01/15(月) 00:02:11.62ID:xkJecHST
街中で俺のスーパーアイが透視し、脳内インプットした女児のマンコ画像が
デコーダーで出力できる時代になったのか。胸熱や。
23名無しのひみつ
垢版 |
2018/01/15(月) 00:02:53.32ID:osCfCqSw
予算獲得の為に無理矢理金魚の画像並べて成果が出たって
言ってるだけだろ。
24名無しのひみつ
垢版 |
2018/01/15(月) 00:14:58.10ID:0pYXdm+n
>>21
人間の認知能力自体がしょぼいからな
>>1のGIF画像も眼球がハッキリと映ってるのは, 人間が眼球にしか注視してないともいえる
25名無しのひみつ
垢版 |
2018/01/15(月) 00:20:19.85ID:CC1c7ewQ
これはヤバいｗｗｗ
2018/01/15(月) 00:29:47.75ID:q15ndg1r
すっげ
文字とか簡単な記号なら余裕だな
27名無しのひみつ
垢版 |
2018/01/15(月) 00:29:59.52ID:tBh7CVsl
むやみにエロい想像も出来ない世の中がやってくるのか
28名無しのひみつ
垢版 |
2018/01/15(月) 00:37:00.99ID:qGshVGHA
被験者は１人？
画像に対するfMRIで測定されるパターンって人によって違うの？同じなの？
29名無しのひみつ
垢版 |
2018/01/15(月) 00:37:22.05ID:A7pmCPlk
やっぱみえてんだな(〃ﾉωﾉ)
30名無しのひみつ
垢版 |
2018/01/15(月) 00:47:41.48ID:O/ky169J
神奈川三浦市長 吉田英男
公用車でソープランド税金不正
https://goo.gl/YuSPqp
2018/01/15(月) 00:50:55.29ID:JGTcvwAm
　　　　　　　 　(<、,,> ":::::::::::::::::::::::::::: ､
　　　　　 〜〈／::::::::::::::::::::::::::::::::::::::::::::)
　　　 　　　〃:::::::::::::::::::::::::::::::::::::::::＜、　 　 ど　ロ　こ
　　 　　~そ:::::::::::::::::::::::::::::::::::::::::::::::::::::,） 　　も　リ　の
　 ､_　,, /::::::::::::::::::::::::、,ゝ=＝=く:::::::,:::::ヽ　 め　コ
　 　 `V::::::::::::::::::::､_γ　　　　　 ｀ヾ,_　＜　！　ン
　 　 　ｌ::::::::::::::::::::::く( 　 r,J三;ヾ 　　)>　く,
　〜v,ん:::::::::::::::´:::::::=; {三●;= } 　,=ﾆ ｀／l／!／⌒Y
　　 　 l:::::::::::::::::::::::::::::ゝ≡三＝イ ´::::ﾞ:::::::::::::::::::::::::::::::
　､m,.. ,ゞ::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::
　´　" ~ ﾍ::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::
　　　　　　　　　　　　　　　fMRI　　　　　　　　　　　　
32名無しのひみつ
垢版 |
2018/01/15(月) 00:53:11.66ID:YIazfmuR
これ事前に何枚か画像を見せてからやってんでしょ？
研究者センスないな
俺ならもっとうまくやるわｗ
33名無しのひみつ
垢版 |
2018/01/15(月) 00:53:46.60ID:35mimvP5
テクノロジーが進み過ぎて人間が人間でなくなる日も遠くないな
2018/01/15(月) 04:31:59.36ID:pLMFIuEU
脳の活動のみで
画像やイメージをアウトプット出来るのか
これは凄いなぁ
35名無しのひみつ
垢版 |
2018/01/15(月) 04:36:17.89ID:oVEufqPW
>>21
人間の視覚環世界は見た通りの映像ではなく
脳内に用意されたスタンプ的なパーツ名をタグ付け分類したり
パターンから相対的に推測した色や図形をあてはめたり
視界の中心以外はキャッシュをコピペするなどして都合よく解釈したもので間に合わせている
そのため脳は楽できるが錯覚を起こすパターンがたくさん存在する
36名無しのひみつ
垢版 |
2018/01/15(月) 04:42:26.63ID:oVEufqPW
>>24
（他者の）目は生活というか生存に大きくかかわるパターンなので
優先的に処理している（天敵にタゲられているかどうかなど）
処理の優先度が条件反射的に決まっているという点では優れたシステムだともいえる
37名無しのひみつ
垢版 |
2018/01/15(月) 04:49:17.06ID:MQ8aOztO
これは酷い

視神経からの信号が脳に送られてまだ何の高次処理も行われてない段階の部分を観測したってだけの話じゃねーか
38名無しのひみつ
垢版 |
2018/01/15(月) 04:56:02.97ID:QSVv6vu+
取り出した情報をもう一度脳に感覚としてフィードバックして、
「頭でエロいシチュエーションを想像する → 実際に気持ちイイ」
にしてほしい。
39名無しのひみつ
垢版 |
2018/01/15(月) 05:29:35.06ID:NQwFbPT9
この技術が完成したところでクオリア問題は解決しないんだよなぁ…
2018/01/15(月) 05:39:07.07ID:ftj7gGbc
>>37
高次処理ってこの後なにすんだ？
細分化されて各々認識ニューロンに分散してくだけじゃねーの？
41名無しのひみつ
垢版 |
2018/01/15(月) 05:49:06.20ID:yalKrM4I
iPhone のアプリはいつ？
42名無しのひみつ
垢版 |
2018/01/15(月) 06:10:06.71ID:9gGwNqgh
エスパーはこれ
2018/01/15(月) 06:44:19.38ID:60J3MmYr
著名エロ原画師の脳内イメージぜひ見たい
44名無しのひみつ
垢版 |
2018/01/15(月) 07:00:00.97ID:2Iu8Sedt
電車内でこの人痴漢です
スマホに妄想が録画されました
とかになるのか
2018/01/15(月) 07:02:21.59ID:DpSLFu+X
これ被験者変えるとまた再設定しないといけないのかな
46名無しのひみつ
垢版 |
2018/01/15(月) 08:58:39.57ID:WKbBTgtT
これってどの程度成功したといえるんだろうかね？
似ても似つかないようにも思えるが
47名無しのひみつ
垢版 |
2018/01/15(月) 08:59:50.96ID:weX6XZ1w
むしろ人間の脳は曖昧なイメージだけで物体を認識しているということかな
2018/01/15(月) 09:08:18.35ID:MI5Fz2ai
具体的にどういう手法なのか知りたい
49名無しのひみつ
垢版 |
2018/01/15(月) 09:20:08.21ID:kE/O6Klj
これは被験者になりたくないなぁ

エロいこと考えてたら嫌じゃん
50名無しのひみつ
垢版 |
2018/01/15(月) 09:32:42.64ID:HBi2WQqB
電磁波のテンペストの人間版だな

>>39
科学という範疇においてクオリアは解決する必要性自体が無い
2018/01/15(月) 09:45:48.85ID:MJN296YX
>>1
このGif動画、GoogleAIのCNNの画像まんまで笑った

視覚需要野の機能は機械的に再現できているといえよう
2018/01/15(月) 09:50:06.84ID:MJN296YX
GoogleAIのはこんなん
https://vimeo.com/211758157
https://irorio.jp/wp-content/images/uploads//2015/06/b524cb032671718e8b650782e3eef83f-710x444.jpg
53名無しのひみつ
垢版 |
2018/01/15(月) 10:00:56.72ID:FqqQnwqu
あ〜これは、アカンやつやｗ
54名無しのひみつ
垢版 |
2018/01/15(月) 10:21:00.47ID:uQGAmmgN
映画のなかで出てくるような
これ鮮明になったら犯罪とか検挙らくかな
55名無しのひみつ
垢版 |
2018/01/15(月) 10:49:01.77ID:02k7t//Y
脳内で美化した状態で記憶を記録できるなんて素敵やん
真実なんていらんわ
56名無しのひみつ
垢版 |
2018/01/15(月) 11:02:36.17ID:4Q+/DhnC
この被験者、どんな写真を見せても女性器の画像しか出力されないんですけど！？
57名無しのひみつ
垢版 |
2018/01/15(月) 11:03:58.01ID:WkFeQzJ3
おっぱい星人の私がぜひ被験体に
2018/01/15(月) 11:11:41.31ID:o+pclOah
ちょっと前まではオカルト扱いされてたような領域まで
研究が進んで来てるんだなあ
2018/01/15(月) 11:17:48.85ID:nixLBbfB
頭の中でそんなリアルにイメージ出来ないんだが。
他のヤツらはできるの？
60名無しのひみつ
垢版 |
2018/01/15(月) 11:19:18.12ID:WwUYV+I5
dqnは使わないの
61名無しのひみつ
垢版 |
2018/01/15(月) 11:20:04.63ID:2prcr8Bh
夢録画機がついに完成したか
　 ( ﾟдﾟ)　ｶﾞﾀｯ
　 /　　 ヾ
＿_L| /￣￣￣/＿
　 ＼/　　　/
62名無しのひみつ
垢版 |
2018/01/15(月) 11:30:57.96ID:OZCRSTfb
ピカソの女性の絵って鼻や目の向きが変だけど
なぜ女性がそう見えるのかは
魔法使いを卒業するときに分かった
63名無しのひみつ
垢版 |
2018/01/15(月) 11:31:21.24ID:vD9GUEYY
盗撮だな。研究者は逮捕。
64名無しのひみつ
垢版 |
2018/01/15(月) 11:51:56.92ID:ZF+RpTme
>>1
産地直送のイメージが生成された
65名無しのひみつ
垢版 |
2018/01/15(月) 11:55:14.68ID:S1AH2JO0
これであの人何考えてるかわかんないって言われなくなるな
大勝利！
2018/01/15(月) 12:13:45.26ID:cqWOF8+q
何も見ないで念写できるかの実験はしたのかな
67名無しのひみつ
垢版 |
2018/01/15(月) 12:22:39.75ID:qW/IoSam
ドクターハウスで見た
68名無しのひみつ
垢版 |
2018/01/15(月) 12:41:31.14ID:VxLDXpeF
>>8
児ポ画像脳内保有にて逮捕とか。
69名無しのひみつ
垢版 |
2018/01/15(月) 13:43:57.20ID:Uy8TdTYz
>>40
画像認識するに決まってるだろ

眼からきたデータそのまま取り出したって何の意味もねーよ
70名無しのひみつ
垢版 |
2018/01/15(月) 13:56:28.93ID:63uRuTMO
>>1
5年前の研究に比べてレベルが落ちてるんだけど
https://youtu.be/0o17Zwzam1g
こいつらディープラーニングの使い方がわかってないだろ？
2018/01/15(月) 14:21:02.33ID:Dv34d9nL
>>39
統合情報理論で解決済みだよ
72名無しのひみつ
垢版 |
2018/01/15(月) 14:26:56.72ID:Q5iUVu/d
完全な幾何抽象に行き着く前のモンドリアンの絵みたい
2018/01/15(月) 14:35:13.74ID:LycWXbS2
電磁記録不要とか産業スパイはかどりまくり
74名無しのひみつ
垢版 |
2018/01/15(月) 14:51:56.61ID:W3NAPKHz
眼には眼を とゆうやつだねw

脳的電磁機器媒体新規保存装置
電気信号だから
75名無しのひみつ
垢版 |
2018/01/15(月) 15:01:29.05ID:wkZoYuYx
そのうち脳内で考えたエロいことを映像化して売ったり出来るのか
今は絵が上手かったり他の才能がないとダメだけど妄想力が強い奴が勝つ時代が来るのかな･･･(´・ω・`)
76名無しのひみつ
垢版 |
2018/01/15(月) 15:16:51.19ID:2ATSRt4F
目だけははっきり分かるのがすごいな
あと唇みたいなのが見えるのがあるけど、模様パターンが似てるとかなんだろうか
2018/01/15(月) 15:48:12.72ID:RhMufTKL
>>70
いや、今回のがレベルが高い
2018/01/15(月) 17:58:26.83ID:aUXB6sMI
>>75
絵描いてる人間の脳内イメージって全然明確じゃないよ
曖昧なイメージに手探りでディテールを足していくことで成り立つ
だからまずラフを描くわけで
2018/01/15(月) 20:34:03.53ID:cNH1jVWS
>>52
似てる気がしなくもない
2018/01/15(月) 20:54:30.99ID:KRKfC15q
>>59
細部まで再現出来てないけど再現出来た感覚になってる
細部まで明確にイメージ出来るなら飛ばし読みじゃない速読が出来るレベル
81名無しのひみつ
垢版 |
2018/01/17(水) 16:34:13.23ID:NyO+lsfq
70のやつとの違いが分からない
2018/01/17(水) 20:37:52.28ID:KUXkaBXJ
人間には使わない方が良いんじゃないかなぁ…もっと良い応用が考えられる。
83名無しのひみつ
垢版 |
2018/01/17(水) 21:07:08.85ID:/PNczVVz
関係ないけどイマージュっていう精神科学雑誌を
昔読んでたな
ラカンとか全然わからんかったな
2018/01/17(水) 22:25:41.85ID:3YO44Ysq
>>82
じゃ、言ってみな。どんな利用だよ？
85名無しのひみつ
垢版 |
2018/01/17(水) 22:55:16.21ID:y23RPrzY
ムスカは倒されラピュタは空へ登っていったけれど
現実ではそううまくことは運ぶことはないかもしれない
悪魔と闘うしかない
2018/01/17(水) 23:18:34.62ID:KUXkaBXJ
え〜と、コレは言うなって事かなｗ

既に実行されてる気がするけど、応用で実行したのか、
実行されてる事がヒントにコレを開発したのか、
単に俺の妄想か…
87名無しのひみつ
垢版 |
2018/01/18(木) 00:00:11.43ID:Qvmuke7S
>>86
めんどくさい人ですね
88名無しのひみつ
垢版 |
2018/01/18(木) 00:10:57.56ID:Ljfss8ZC
>予算獲得の為に無理矢理金魚の画像並べて成果が出たって
>言ってるだけだろ。

ほんこれ。
2018/01/18(木) 00:27:42.23ID:uOyrsQwg
よっっしゃ教師のロリコン判定に使えはよ使えまた犯罪が起こる前に
2018/01/18(木) 23:29:06.93ID:z3RxRoNm
>>87
もっとシンプルにしたいんだけど、何故か許してくれないんだ
91名無しのひみつ
垢版 |
2018/02/13(火) 00:54:31.16ID:imXVMB0F
頭の中覗けるってことか
これはダメでしょ
92名無しのひみつ
垢版 |
2018/02/13(火) 07:54:25.51ID:0F43ojRA
>>50
>科学という範疇においてクオリアは解決する必要性自体が無い

そんな事はない
93名無しのひみつ
垢版 |
2018/02/13(火) 07:56:12.94ID:wJGjxb7f
エロい画像ばっかり映ったら恥ずかしいなあ。
■ このスレッドは過去ログ倉庫に格納されています
ニューススポーツなんでも実況