探検

【AI】AppleのAI研究者らが「今のAI言語モデルは算数の文章題への推論能力が小学生未満」と研究結果を発表 [すらいむ★]

■ このスレッドは過去ログ倉庫に格納されています
1すらいむ ★
垢版 |
2024/10/14(月) 19:23:04.74ID:GvZlJpCr
AppleのAI研究者らが「今のAI言語モデルは算数の文章題への推論能力が小学生未満」と研究結果を発表

　OpenAIのGPT-4など大規模言語モデル(LLM)をベースにしたAIは、自然な文章を生成したりさまざまな課題をクリアしたりと、高度で広範な機能を備えています。
　しかし、依然として小学生レベルの算数でも、文章題だと人間がしないようなミスをして答えられないケースがあります。
　Appleの人工知能科学者が発表した論文では、MetaやOpenAIなどの大規模言語モデルに基づくAIは「基本的な推論能力が欠けている」という研究結果が示されました。

　[2410.05229] GSM-Symbolic: Understanding the Limitations of Mathematical Reasoning in Large Language Models
　https://arxiv.org/abs/2410.05229

（以下略、続きはソースでご確認ください）

Gigazine 2024年10月14日 19時00分
https://gigazine.net/news/20241014-llm-reasoning/
63名無しのひみつ
垢版 |
2024/10/16(水) 16:16:44.03ID:dL05Rnxq
ひとつひとつルールを学習って、文系の数学（問題のパターンを全部覚えるらしい）じゃん
2024/10/16(水) 16:55:35.65ID:dS58hcEj
フレーム問題の解決には身体（性）が必須だ
なんて言ってたな昔は　懐かしい
65名無しのひみつ
垢版 |
2024/10/17(木) 19:14:58.24ID:9lp5xsfR
愚門だから回答がおかしくなるのでは?
66名無しのひみつ
垢版 |
2024/10/17(木) 19:16:19.61ID:9lp5xsfR
>>65

あまたの言葉を使用してその問いかけになるようにすれば正解率が跳ね上がるのでは
67名無しのひみつ
垢版 |
2024/10/17(木) 19:18:59.71ID:9lp5xsfR
オープン・クエスチョンとクローズド・クエスチョン

前者って人間でも回答が各個人でかなり差が出る
後者で聞かないと駄目

話の中間などにオープン・クエスチョンが入ると話がこじれる
68名無しのひみつ
垢版 |
2024/10/17(木) 19:22:05.54ID:9lp5xsfR
人間でもクローズド・クエスチョンで聞いているのに

話の筋はあっているが別のことを話し出す人がいるのですよ

周囲で聞いていたら何を聞いていたのだろうと思う人多数でる
69名無しのひみつ
垢版 |
2024/10/17(木) 19:55:01.65ID:0ZOTFflf
日本の運転免許のペーパーテストの悪問はＡＩは正答無理じゃないか？

①「夜間の道路は危険なので気を付けて運転しなければならない」
②「赤信号では必ず停車しなければならない」
③「原動機付き自転車は公道で５０ｋｍ／ｈ以上で走ってはならない」
④「公道を普通自動車で運転する際には必ずシートベルトを装着する必要がある」
⑤「制限速度３０ｋｍ／ｈの道路では、その制限速度を超えて走行してはいけない」

（ちなみに正答は全て「×」）
2024/10/17(木) 20:00:51.42ID:P32HfES+
産まれたばかりという意味で小学生並というのは当たってる
71名無しのひみつ
垢版 |
2024/10/18(金) 00:58:42.45ID:PAZgU3Jf
免許の学科試験問題作成にＡＩを活用しようという試みはあったけど、
人間が作る「悪問」のようなヒッカケ問題をＡＩが作れず試みは放棄された
72名無しのひみつ
垢版 |
2024/10/18(金) 21:00:08.65ID:N5McyG3q
いや、そこは普通に問題を作らせればさらっと間違いの入った問題を作ってくれるだろ
大半の馬鹿な人が騙されるような
今はそういうレベルだろ
2024/10/19(土) 01:53:45.81ID:VgYkgS08
還暦ですが50才年下の女性と結婚できますか
ときいたら大丈夫年の差婚頑張ってと言われたからなぁ
74名無しのひみつ
垢版 |
2024/10/19(土) 03:07:41.36ID:zifOzePG
LLMに騙されてることに気付かずありがたがってる人達って境界知能だよね
75名無しのひみつ
垢版 |
2024/10/19(土) 05:14:15.16ID:rhSFL5Pk
他社のAIに圧倒されて
siriのショボさ(´･ω･｀)を
誤魔化すのに必死な感
76名無しのひみつ
垢版 |
2024/10/19(土) 11:15:21.87ID:h+Xst+tI
>>69のような学科試験の悪問をＡＩに答えさせたらどうなるかな

>>69まんまだとネットで答え出てるので正答しちゃうけどね
77 警備員[Lv.6][芽]
垢版 |
2024/10/19(土) 14:58:54.62ID:rhSFL5Pk
>>74
騙されまい利用しまい（騙されずに利用する自信がない）、と思うなら、
騙されて利用した気になる者のことを、そう思うだろうなぁ。

この新時代のツールを騙されずに利用する者より
78名無しのひみつ
垢版 |
2024/10/20(日) 17:05:39.80ID:50ROSo28
>>77
憎い憎いApple憎いだけでコメントするような奴のレベルなんてこんなもん
79名無しのひみつ
垢版 |
2024/10/21(月) 11:11:51.06ID:4NQP504E
>>78
非Apple儲というだけでコメントするような奴のレベルなんてこんなもん
80名無しのひみつ
垢版 |
2024/10/21(月) 11:45:50.10ID:SfJ9XlSq
>>62
人間の曖昧な感覚とか自然言語の処理には失敗したけど、数学のような論理の厳密性が問われる分野ではどっちが成功するか分からん
少なくとも大規模言語モデルのアプローチは数学には全く向かない
81名無しのひみつ
垢版 |
2024/10/21(月) 12:33:40.37ID:RmxdaMTe
>>80
そこでベイズ
82名無しのひみつ
垢版 |
2024/10/24(木) 00:17:36.79ID:Ftcj57FN
>>18
これが現実
騙される奴らって‥
2024/10/24(木) 19:38:45.23ID:EhoJzYGp
AirDropとかいうクソ無能の極み！虫食い毒林檎！死ね！！
84名無しのひみつ
垢版 |
2024/10/25(金) 16:55:16.62ID:zJVlm+qi
反論できなくなるとAppleの悪口を書くだけ
チーズ牛丼食ってそうだな
2024/10/25(金) 16:59:39.84ID:APtTiTkv
Appleの時価がNvidiaに抜かれそう
象徴的なイベント
86名無しのひみつ
垢版 |
2024/10/28(月) 14:01:34.43ID:ZBINgW4K
AIは文系脳。
2024/11/05(火) 21:31:04.14ID:rcv9BH2t
得手不得手があるなんて
むしろ優秀なのである
88名無しのひみつ
垢版 |
2024/11/08(金) 21:14:44.25ID:WbYDGkK3
>>86
知識の引き出しで勝負してるだけだもんな
2024/11/08(金) 21:42:07.60ID:yjkwtjUf
昭和50年は平成何年ですかと聞くと
昭和は平成ではないと答えてくるが、
昭和50年は平成マイナス何年かと聞くと
西暦に変換して計算して答えてくれる。

つまり問題の文章次第、出題者の文章力次第なのではないかな？
2024/11/08(金) 21:54:33.46ID:Ek5rH+yD
誘導してやると答えてくれる
2024/11/08(金) 23:15:52.59ID:wgGDDWbU
少なくとも小学生は誘導しても答えられない
92名無しのひみつ
垢版 |
2024/11/09(土) 19:12:46.15ID:W01juSZS
>>18
ChatGPTに散々文句垂れて
昨日やっと一発で正解したけど
今日はどうなるか分からない
93名無しのひみつ
垢版 |
2024/11/09(土) 19:15:52.69ID:W01juSZS
>>88
AIは知識問題はむしろ苦手
2024/11/11(月) 20:38:33.72ID:sBOyav4T
以前は山手線の駅を書き出してと頼むと熱海や名古屋まで出てきたしな

人工知能は日本が苦手なのです
2024/12/14(土) 15:36:58.45ID:MLGwpCk2
まあAppleはAI競争降りたからAIネガキャンに走るだろうな
そうして市場価値下げた方が端末に載せやすいリーズナブルな価格に落ちるから
■ このスレッドは過去ログ倉庫に格納されています
ニューススポーツなんでも実況