Japanese outlet breaks down Astra's ARC-AGI-3 scores
A Japanese piece covers OpenAI's GPT-6 Astra release and focuses on ARC-AGI-3, where Astra scores 99.9% with external tools but only in the 60s without them.
【人類はもう「AGIの時代」に入ったのかもしれない】 OpenAIが最先端のフロンティアモデル『GPT-6 Astra』を発表した。 まずは一部の組織から提供が始まっているようで、 実際に使った人たちからは「これはすごいものが出た」という声が次々とあがっている。 各種ベンチマークでも軒並みハイスコアだが、 なかでも注目されているのがARC-AGI-3。 AIが汎用人工知能（AGI）にどれだけ近づいているかを測定するためのテストなのだが、 そこに用意されているのは指示も目標も伏せられたゲームの数々。 たとえばパズルのような盤面に青いボックスが置かれているだけで、 どう動かすのかもルールも分からないまま、 試行錯誤で解き明かしていくことになる。 そのARC-AGI-3の外部のツールを使える部門では、 Astraが99.9％というスコアを叩き出している。 自らプログラムを書いて計算させ、 そのゲーム専用の道具まで自作しながら、 ほぼ取りこぼすことなく解き切ってしまったのだ。 もっとも、 外部のツールをいっさい使えないスタンダードという部門では、 Astraのスコアは60％台にとどまっている。 この数字だけを見れば、 まだ人間の知能レベルには完全には届いていないように映るかもしれない。 しかし、 これは人間に置き換えてみると分かりやすいと思う。 人間だって、 数学のような複雑な問題を解くときにはPythonで大量の計算をぶん回すし、 途中で気づいたことはメモなどに書き留める。要するに、 人間も同じように外部ツールをたくさん使いながら問題を解いているわけである。 だとすれば、 Astraはもう<続> 【完全無料】毎朝 9:00時発行 ホリエモン公式の無料ニュースレターの登録はこちらから↓ http://horiemon.media/register/ ホリエモンの時事ネタ解説だけでなく、QAコーナーやガジェット・書籍マンガ・映画・飲食店ホテルのオススメも紹介！ @takapon_jp