ARC-AGI-1のリーダーボード
2026年11月16日時点で、ARC-AGI-1の最高スコアは98.5%で、Claude Fable 5.2、GPT-6 Astra、Claude Opus 5.5、Gemini 4 Carbon、Gemini 4 Argonほか3モデルが並んでいます。公表された結果があるのは265のモデル構成です(ARC Prize、結果の日付は2026年11月9日)。ARC-AGI-1は、グリッド変換の例をいくつか示し、新しいグリッドでの出力を求めます。ごくわずかな例からルールを推測する力を試すもので、セミプライベートの評価セットは非公開です。ARC-AGI-1はBenchLeader Indexの推論スコアに反映されます。
要点(2026年11月16日時点)
- Claude Fable 5.2、GPT-6 Astra、Claude Opus 5.5、Gemini 4 Carbon、Gemini 4 Argonほか3モデルがARC-AGI-1の最高スコア98.5%で並んでいます(ARC Prize、2026年11月16日)。
- ARC-AGI-1:ARC-AGI-1の準非公開評価セット(ARC Prize)。
- BenchLeaderでは265のモデル構成にARC-AGI-1の公表結果があります(BenchLeader、2026年11月16日)。
- ARC-AGI-1はBenchLeader Indexの推論カテゴリに反映されます(BenchLeaderの評価方法)。
ARC-AGI-1の準非公開評価セット。
- 公開元
- ARC Prize
- カテゴリ
- 推論
- Indexでの重み
- 0.5
- モデル
- 265
- データ基準日
- 2026年11月16日
- 最新の結果
- 2026年11月10日
ARC Prize Foundation, arcprize.org.
どんなテストか
ARC-AGI-1は、グリッド変換の例をいくつか示し、新しいグリッドでの出力を求めます。ごくわずかな例からルールを推測する力を試すもので、セミプライベートの評価セットは非公開です。
採点方法
2回以内の試行で解けたタスクの割合で、ARC Prize Foundationが実行し、タスクあたりのコストも併せて報告しています。
注意点
スコアはテスト時の計算量とともに急上昇するため、同じモデルでも推論の予算が違えば数十ポイント差が出ることがあり、スコアと同じくらい効率が重要です。現在ではトップのシステムがほぼ解いています。
- 1Claude Fable 5.2 (xhigh)98.5%
- 2GPT-6 Astra (high)98.5%
- 3Claude Opus 5.5 (high)98.5%
- 4GPT-6 Astra (xhigh)98.5%
- 5Gemini 4 Carbon (medium)98.5%
- 6Gemini 4 Argon (high)98.5%
- 7Claude Fable 5 (max)98.5%
- 8GPT-6.1 Sol (xhigh)98.5%
- 9GPT-6.1 Sol (high)98.5%
- 10Gemini 4 Argon (medium)98.5%
- 11Gemini 3.8 Flash (high)98.5%
- 12Claude Fable 5 (xhigh)98.5%
- 13Gemini 3.1 Pro98.0%
- 14Claude Fable 5.2 (max)97.5%
- 15Gemini 4 Carbon (high)97.5%
265件中265件
| # | |||||
|---|---|---|---|---|---|
| 1 | NEW | 98.5% | 69.7 | $0.358 | 2026-11-09 |
| 2 | 98.5% | 66.3 | $0.284 | 2026-09-02 | |
| 3 | 98.5% | 66.0 | $0.158 | 2026-09-22 | |
| 4 | 98.5% | 66.0 | $0.347 | 2026-09-02 | |
| 5 | 98.5% | 65.8 | $0.162 | 2026-11-10 | |
| 6 | 98.5% | 65.3 | $0.162 | 2026-10-13 | |
| 7 | 98.5% | 65.1 | $2.11 | 2026-06-09 | |
| 8 | 98.5% | 63.6 | $0.074 | 2026-09-29 | |
| 9 | 98.5% | 63.4 | $0.059 | 2026-09-29 | |
| 10 | 98.5% | 61.6 | $0.065 | 2026-10-13 | |
| 11 | 98.5% | 59.4 | $0.206 | 2026-09-02 | |
| 12 | 98.5% | – | $1.02 | 2026-06-09 | |
| 13 | 98.0% | 59.9 | $0.522 | 2026-02-19 | |
| 14 | NEW | 97.5% | 72.7 | $0.921 | 2026-11-09 |
| 15 | 97.5% | 68.9 | $0.407 | 2026-11-10 | |
| 16 | 97.5% | 68.4 | $0.641 | 2026-09-22 | |
| 17 | NEW | 97.5% | 68.4 | $0.329 | 2026-11-09 |
| 18 | 97.5% | 67.3 | $0.433 | 2026-09-02 | |
| 19 | 97.5% | 66.7 | $1.40 | 2026-09-01 | |
| 20 | NEW | 97.5% | 66.3 | $0.264 | 2026-11-09 |
| 21 | 97.5% | 65.4 | $0.223 | 2026-09-22 | |
| 22 | 97.5% | 65.0 | $0.700 | 2026-07-24 | |
| 23 | 97.5% | 64.4 | $0.470 | 2026-07-24 | |
| 24 | 97.5% | 64.4 | $0.240 | 2026-09-02 | |
| 25 | 97.5% | 63.9 | $0.400 | 2026-07-09 | |
| 26 | 97.5% | 61.2 | $0.152 | 2026-09-22 | |
| 27 | 97.5% | 60.2 | $0.108 | 2026-09-02 | |
| 28 | 97.0% | 63.4 | $0.300 | 2026-07-09 | |
| 29 | 96.5% | 66.6 | $0.095 | 2026-09-29 | |
| 30 | 96.5% | 65.3 | $0.540 | 2026-07-09 | |
| 31 | 96.5% | 64.6 | $0.958 | 2026-09-01 | |
| 32 | 96.5% | 64.2 | $0.502 | 2026-09-28 | |
| 33 | 96.5% | 62.5 | $0.143 | 2026-09-28 | |
| 34 | 96.5% | 62.0 | $0.227 | 2026-09-02 | |
| 35 | 96.5% | 59.5 | $0.550 | 2026-07-09 | |
| 36 | 96.5% | – | $4.53 | 2026-04-23 | |
| 37 | 96.5% | – | $0.082 | 2026-11-05 | |
| 38 | 96.0% | 63.7 | $0.517 | 2026-09-01 | |
| 39 | 96.0% | – | $7.17 | 2026-02-12 | |
| 40 | 95.5% | 63.9 | $0.767 | 2026-06-09 | |
| 41 | 95.5% | 62.7 | $0.050 | 2026-09-29 | |
| 42 | 95.5% | 62.6 | $0.141 | 2026-09-22 | |
| 43 | 95.5% | 62.1 | $0.120 | 2026-08-13 | |
| 44 | 95.0% | 64.1 | $0.730 | 2026-04-22 | |
| 45 | 95.0% | – | $4.52 | 2026-04-23 | |
| 46 | NEW | 94.5% | 65.3 | $0.230 | 2026-11-09 |
| 47 | 94.5% | 63.5 | $0.560 | 2026-04-22 | |
| 48 | 94.5% | 61.7 | $0.443 | 2026-09-01 | |
| 49 | 94.5% | 60.2 | $0.770 | 2026-07-16 | |
| 50 | 94.5% | 59.5 | $7.21 | 2026-03-04 | |
| 51 | 94.5% | 58.5 | $0.066 | 2026-09-10 | |
| 52 | 94.5% | 51.2 | $0.056 | 2026-10-17 | |
| 53 | 94.0% | 62.5 | $1.39 | 2026-02-05 | |
| 54 | 94.0% | 60.1 | $0.260 | 2026-07-09 | |
| 55 | 93.7% | 63.1 | $0.620 | 2026-03-04 | |
| 56 | 93.5% | 60.0 | $0.047 | 2026-09-29 | |
| 57 | 93.5% | 57.7 | $0.065 | 2026-10-17 | |
| 58 | 93.5% | – | $1.41 | 2026-04-16 | |
| 59 | 93.0% | 57.0 | $1.88 | 2026-02-05 | |
| 60 | 92.7% | 58.6 | $0.370 | 2026-03-04 |
関連するベンチマーク
ARC-AGI-1での注目のモデル比較
引用表記:BenchLeader「ARC-AGI-1のリーダーボード」2026年11月16日時点のデータ、https://www.benchleader.com/ja/benchmarks/arc_agi_1
ARC-AGI-1:よくある質問
- ARC-AGI-1は何を測るベンチマークですか?
- ARC-AGI-1は、グリッド変換の例をいくつか示し、新しいグリッドでの出力を求めます。ごくわずかな例からルールを推測する力を試すもので、セミプライベートの評価セットは非公開です。スコアは解けたタスクの割合(%)で示され、高いほど良い結果です。
- ARC-AGI-1の最高スコアは?
- 2026年11月16日時点で、ARC-AGI-1の最高スコアは98.5%で、Claude Fable 5.2、GPT-6 Astra、Claude Opus 5.5、Gemini 4 Carbon、Gemini 4 Argonほか3モデルが並んでいます。スコアはARC Prizeの公表値で、毎日読み直しています。
- ARC-AGI-1でトップのAIモデルは?
- 2026年11月16日時点で、Claude Fable 5.2、GPT-6 Astra、Claude Opus 5.5、Gemini 4 Carbon、Gemini 4 Argonほか3モデルが98.5%でARC-AGI-1の首位に並んでいます。
- ARC-AGI-1の結果があるモデルはいくつですか?
- BenchLeaderでは265のモデル構成にARC-AGI-1の結果があり、すべてARC Prizeから取得しています。
- ARC-AGI-1を運営しているのは誰で、どのくらいの頻度で更新されますか?
- ARC-AGI-1はARC Prizeが公開しています。BenchLeaderは公開された結果を1日1回読み直し、各結果の公開日を記録しています。
- ARC-AGI-1はBenchLeader Indexに含まれますか?
- はい。ARC-AGI-1はBenchLeader Indexの推論カテゴリに反映され、評価対象モデルの平均が50になるよう正規化されています。