【AI】これまでで最も難しいAIテスト「人類最後の試験」リリース、3000の多肢選択問題と短答式の質問で構成 [すらいむ★]

これまでで最も難しいAIテスト「人類最後の試験」リリース、3000の多肢選択問題と短答式の質問で構成

　AI企業のScale AIおよびAI研究組織のCenter for AI Safety(CAIS)が共同で、AIの知識の限界をテストするために設計したベンチマーク「人類最後の試験(Humanity's Last Exam)」を公開しました。
　既存の主要モデルのうち、正解率10％を超えるモデルは存在しなかったとのことです。

　Scale AI and CAIS Unveil Results of Humanity’s Last Exam
　https://scale.com/blog/humanitys-last-exam-results

（以下略、続きはソースでご確認ください）

Gigazine 2025年01月24日 17時00分
https://gigazine.net/news/20250124-humanitys-last-exam/

ウクライナの戦争の終わらせ方を聞いてみれば

トランプより賢いということになるかも

答え
42

>>3
その答えはこんなに早く出せないやろ

>>4
いやこれはSFのネタ

人間も合格出来るやつは10%もいないんじゃあないのかｗ

生き物は自分より賢い知能を理解できないからなあ
仮に人間より圧倒的に賢いAIができたとしても、人間はAIが狂ったとしか思わないぞ

1年以内に正解率が５０％になると記載されている

今後に期待ですね

答えは『42』です

人類でも未解の問題を試してほしい
AIがどう答えるか

このAIテストを公開したら意図しなくてもインターネットのクローリングで学習に含まれてしまうのでは？

オリジナル数学のc問題を解いてからな。

>>10
リーマン予想とか近い将来
AIが解決するのかな

>>11
毎年その時の受験をやらせる。ってのが一番判定としては正しいかと。
小学校お受験のほうがむつかしいとか出たら面白い。

設問に出て来る概念をちゃんと教えたら正解してしまったよｗ
覚え方が反対になってるか特定の文化的形式で理解しているものがあるようだね

AIが人類最後の問題出してきたら
間違えるとすごくヤバそうｗ

>>6
10%どころじゃないでしょ
合格の基準にもよるが、全体の半分正答できるレベルですら世界に何人もいないと思う
wikiペディア丸暗記してようやくスタートライン

>>13
その手の予想って、なんで予想したヤツが解決しないの？
バカじゃないか？

>>18
こいつは高卒
ワイも高卒やからわかるんや

>>18
様々なデータから帰納的には正しいと推測されるが
確実に正しいことを演繹的に証明できてないという話

>>13
その手の予想って、なんで予想したヤツが解決しないの？
バカじゃないか？

>>18
あー多分これはこうなるわって分かってもなんでそうなるのか分からない事ってあるだろ

所詮既定路線内だろ？
人類の賢さに比例してくというだけだろ

ハチドリ目ハチドリは、左右対称の楕円形の骨、すなわち、尾下筋の付着部の拡大した十字腱膜の尾外側部に埋め込まれた種子骨を独自に持っています。この種子骨によって支えられている腱の対は何本ありますか? 数字で答えてください。

6本じゃないの？

>>3
>>9
俺も42だとおもったよ