[R] ARC Round 3 - リリース + テクニカルレポート

Reddit r/MachineLearning / 2026/3/26

📰 ニュースSignals & Early TrendsModels & Research

要点

  • ARC(ARC-AGI)のRound 3がリリースされ、テクニカルレポートが公開された。
  • よくスコアを出すモデルには、推論トレースを検査することでARCに類似したデータが学習データ内に含まれている可能性が示唆された。
  • Round 3のフロンティアモデルはすべて1%未満のスコアにとどまっており、性能改善の余地が大きい。
  • さらにRound 1-2の賞が未達(未回収)のため、今後は精度だけでなく効率の課題も含めた改善が必要だと指摘されている。

https://arcprize.org/arc-agi/3

興味深いですね。彼らは推論の痕跡を調べることで、うまく動作しているモデルはいずれも、トレーニングセット内にARCに似たデータが含まれている可能性が高いことを見つけているようです。

また、ラウンド3のすべての最先端モデルのスコアは1%未満です。改善の余地は大いにあります。特に、ラウンド1-2の賞がまだ受け取られていないことを考えると(効率性がまだ不足しています)。

投稿者: /u/LetsTacoooo
[リンク] [コメント]