AppleのAI研究者らが「今のAI言語モデルは算数の文章題への推論能力が小学生未満」と研究結果を発表
OpenAIのGPT-4など大規模言語モデル(LLM)をベースにしたAIは、自然な文章を生成したりさまざまな課題をクリアしたりと、高度で広範な機能を備えています。
しかし、依然として小学生レベルの算数でも、文章題だと人間がしないようなミスをして答えられないケースがあります。
Appleの人工知能科学者が発表した論文では、MetaやOpenAIなどの大規模言語モデルに基づくAIは「基本的な推論能力が欠けている」という研究結果が示されました。
[2410.05229] GSM-Symbolic: Understanding the Limitations of Mathematical Reasoning in Large Language Models
https://arxiv.org/abs/2410.05229
(以下略、続きはソースでご確認ください)
Gigazine 2024年10月14日 19時00分
https://gigazine.net/news/20241014-llm-reasoning/
【AI】AppleのAI研究者らが「今のAI言語モデルは算数の文章題への推論能力が小学生未満」と研究結果を発表 [すらいむ★]
■ このスレッドは過去ログ倉庫に格納されています
1すらいむ ★
2024/10/14(月) 19:23:04.74ID:GvZlJpCr2024/10/14(月) 19:27:22.13ID:/cXJp8jY
トンチンカン問答のボケ具合は相当なもん
3名無しのひみつ
2024/10/14(月) 19:36:50.71ID:9V2urW4D 結局、東大入試の数学は数式だけだから、解けても
つるかめ算が解けないというw
つるかめ算が解けないというw
4名無しのひみつ
2024/10/14(月) 19:51:07.03ID:DFXFa0hY 人間の愚かさをナメてもらっては困るぞ
2024/10/14(月) 20:06:27.43ID:7mJ4qwHt
split使ってるもんなw
辞書デカいし
辞書デカいし
6名無しのひみつ
2024/10/14(月) 20:21:16.44ID:eQv5inC0 LLMで出遅れたAppleにしか言えない本当の話
投資家の孫正義や、そこらの驚き屋とは言うことが違う!!
投資家の孫正義や、そこらの驚き屋とは言うことが違う!!
2024/10/14(月) 21:18:19.77ID:SOhktA1I
人間のそれなりに多くの人もこの問題引っかかるだろう
計算に用いない無意味な数字を混ぜるやつ
計算に用いない無意味な数字を混ぜるやつ
8名無しのひみつ
2024/10/14(月) 21:21:06.39ID:PDju79k/ 問題の書き方に一貫性が無いのが問題だろう
教師の自由裁量すぎる
教師の自由裁量すぎる
2024/10/14(月) 21:54:40.45ID:v2r9xaZJ
のべっち…
10名無しのひみつ
2024/10/14(月) 22:01:30.52ID:S1+AJYMX こういうのに限らず単純に辞書的な使い方をするのでもない限り人間の意図した答えを対話無しで一発で出してくれる方が珍しいでしょ
11名無しのひみつ
2024/10/14(月) 22:17:07.98ID:IXwBPV/1 数学屋は答えがちゃんと存在するなら質問のクオリティにはあまりこだわらないからな
12名無しのひみつ
2024/10/14(月) 22:19:18.83ID:7mJ4qwHt だいたい2行やなw
13名無しのひみつ
2024/10/14(月) 22:23:46.37ID:pBUeDKZP AIを使いこなすには、
AIの回答を検証できるスキルが必要
AIの回答を検証できるスキルが必要
14名無しのひみつ
2024/10/14(月) 22:29:57.81ID:vYFTnz3i AIは文系だったか
15名無しのひみつ
2024/10/14(月) 22:39:38.62ID:0t+Scbz/ ギレン総帥の演説に洗脳されちゃうもんな
16名無しのひみつ
2024/10/14(月) 22:50:25.49ID:eRIbqT0G 孫正義顔真っ赤
17名無しのひみつ
2024/10/14(月) 23:10:42.68ID:DHPTKyHA 推論能力まで獲得したらほんとに人間いらなくなってしまう
知識量で絶対に勝つのは不可能なのに
肉体労働しか生き残れない
知識量で絶対に勝つのは不可能なのに
肉体労働しか生き残れない
18名無しのひみつ
2024/10/14(月) 23:11:11.50ID:3Zufv+QE19 警備員[Lv.5][新芽]
2024/10/14(月) 23:25:58.75ID:OxrCk7pz また、また、また、
出遅れている分野に関する他社の現行技術水準をディスってなんぼの
戦略的広告か。
A社お得意のキャッチコピーが目に浮かぶような記事だな。
「我が社の新製品は、最大●●倍高速、最大●●倍スマート」
出遅れている分野に関する他社の現行技術水準をディスってなんぼの
戦略的広告か。
A社お得意のキャッチコピーが目に浮かぶような記事だな。
「我が社の新製品は、最大●●倍高速、最大●●倍スマート」
20名無しのひみつ
2024/10/15(火) 01:46:32.92ID:Ze4GRPRa 言語では、ある程度納得させる言説をするのに数字はからきし駄目?
こういう奴よくいない?w
こういう奴よくいない?w
21名無しのひみつ
2024/10/15(火) 03:21:26.51ID:xGM4TnGt22名無しのひみつ
2024/10/15(火) 05:14:52.72ID:gmlkyDuf 推論が正しいかを客観的に(つまり外部モジュール的に)評価することがないからなあ
まあ、でも、1年しないうちに次のバージョンで出来るようになるんじゃね?
まあ、でも、1年しないうちに次のバージョンで出来るようになるんじゃね?
24名無しのひみつ
2024/10/15(火) 05:52:40.06ID:6fYn+bm0 推論能力は大事だよね
https://i.imgur.com/xReuA7Y.jpeg
https://i.imgur.com/xReuA7Y.jpeg
■ このスレッドは過去ログ倉庫に格納されています
ニュース
- 「袋麺の王だと思ってる」 男性が選ぶ“麺がうまい袋麺シリーズ”1位に「下手なお店よりおいしいと思います」 [パンナ・コッタ★]
- 【STARTO ENTERTAINMENT】timelesz猪俣周杜容疑者 なぜ釈放されない?軽傷の傷害事件では異例…10日間の勾留請求が認められる [Ailuropoda melanoleuca★]
- 【サッカー】スイス代表MFジャカ、コロナワクチン接種証明書の偽造を認める…有罪の場合は刑事訴追の可能性も [征夷大将軍★]
- ホワイトハウス出禁でCNNなどが提訴 FOXも連帯、代表取材停止 [蚤の市★]
- 【8割おじさん】新型コロナ猛威に「人との接触を8割減らす」と呼びかけたのは正しかったか…第一線で発信を担った専門家は反省を口に★2 [煮卵★]
- 【愛知・名古屋アジア大会】トラブル続発で…五輪やW杯の招致に影響必至「日本の信用低下に」「国際問題レベル」★2 [jinjin★]
- 【実況】博衣こよりのえちえち朝こよ🧪
- こんにゃくを一番美味しく食べる方法
- この連休のお前らなんだかあたりが強い
- 普通の日本人「アジア大会は実質中国開催!!」で現実から逃亡www [469534301]
- 台湾軍トップ「存立危機発言を撤回できないなら中国の圧力に屈せず真剣に対応しろ!」高市早苗「あわわわ…」 [583538641]
- 『告白』ってどうやんの? [904880432]