MMLU-Proのリーダーボード
2026年11月16日時点で、MMLU-Proの最高スコアは92.4%で、Claude Fable 5.1(Anthropic)が記録しています。次点はClaude Opus 5の91.6%です。公表された結果があるのは133のモデル構成です(Vals AI、結果の日付は2026年9月1日)。MMLU-ProはMMLUを難しくした後継版です。14科目にわたる約12,000問で、各問題に選択肢が10個あり、推論を多く要する問題が増えています。元のMMLUにあった簡単すぎる問題やノイズの多い問題は取り除かれています。MMLU-ProはBenchLeader Indexの知識スコアに反映されます。
要点(2026年11月16日時点)
- Claude Fable 5.1がMMLU-Proの最高スコア92.4%を記録しています(Vals AI、2026年9月1日)。
- MMLU-Proの2位はClaude Opus 5で、91.6%です(Vals AI、2026年9月1日)。
- MMLU-Pro:MMLUの後継で、より難しく推論の比重が大きいテスト。Vals AIが実施(Vals AI)。
- BenchLeaderでは133のモデル構成にMMLU-Proの公表結果があります(BenchLeader、2026年11月16日)。
- MMLU-ProはBenchLeader Indexの知識カテゴリに反映されます(BenchLeaderの評価方法)。
MMLUの後継で、より難しく推論の比重が大きいテスト。Vals AIが実施。
- 公開元
- Vals AI
- カテゴリ
- 知識
- Indexでの重み
- 1.0
- モデル
- 133
- データ基準日
- 2026年11月16日
Vals AI (vals.ai).
どんなテストか
MMLU-ProはMMLUを難しくした後継版です。14科目にわたる約12,000問で、各問題に選択肢が10個あり、推論を多く要する問題が増えています。元のMMLUにあった簡単すぎる問題やノイズの多い問題は取り除かれています。
採点方法
正答率で、Vals AIが実行しています。
注意点
多肢選択式であることに変わりはないため、問われるのは正解を見分ける力です。幅広い知識を問う試験の常として、最先端のモデルでは飽和に近づいています。
- 1Claude Fable 5.1 (max)92.4%
- 2Claude Opus 5 (max)91.6%
- 3Claude Fable 5 (max)91.5%
- 4Gemini 3.1 Pro (high)91.0%
- 5Gemini 3.8 Flash (high)90.2%
- 6Gemini 3.7 Flash (high)90.1%
- 7Gemini 3 Pro90.1%
- 8Claude Opus 4.7 (max)89.9%
- 9Claude Opus 4.8 (max)89.6%
- 10Gemini 3.5 Flash (high)89.5%
- 11Grok 4.6 (high)89.4%
- 12Qwen3.7 (max)89.3%
- 13Gemini 3.6 Flash (high)89.3%
- 14Grok 4.5 (high)89.2%
- 15Claude Opus 4.6 (max)89.1%
133件中133件
| # | |||||
|---|---|---|---|---|---|
| 1 | 92.4% | 66.7 | $0.098 | 2026-09-01 | |
| 2 | 91.6% | 65.0 | $0.028 | 2026-09-01 | |
| 3 | 91.5% | 65.1 | $0.082 | 2026-09-01 | |
| 4 | 91.0% | 60.4 | $0.028 | 2026-09-01 | |
| 5 | 90.2% | 59.4 | $0.022 | 2026-09-01 | |
| 6 | 90.1% | 62.1 | $0.011 | 2026-09-01 | |
| 7 | 90.1% | 60.0 | $0.037 | 2026-09-01 | |
| 8 | 89.9% | 59.7 | $0.062 | 2026-09-01 | |
| 9 | 89.6% | 61.1 | $0.061 | 2026-09-01 | |
| 10 | 89.5% | 62.5 | $0.025 | 2026-09-01 | |
| 11 | 89.4% | 60.6 | $0.015 | 2026-09-01 | |
| 12 | 89.3% | 60.0 | $0.017 | 2026-09-01 | |
| 13 | 89.3% | 61.0 | $0.013 | 2026-09-01 | |
| 14 | 89.2% | 56.8 | $0.015 | 2026-09-01 | |
| 15 | 89.1% | 57.0 | $0.052 | 2026-09-01 | |
| 16 | 89.1% | 65.3 | $0.032 | 2026-09-01 | |
| 17 | 88.7% | 59.5 | $0.011 | 2026-09-01 | |
| 18 | 88.6% | 58.7 | $0.019 | 2026-09-01 | |
| 19 | 88.6% | 57.4 | $0.019 | 2026-09-01 | |
| 20 | 88.3% | 61.5 | $0.011 | 2026-09-01 | |
| 21 | 88.1% | 64.1 | $0.028 | 2026-09-01 | |
| 22 | 88.0% | 60.2 | $0.021 | 2026-09-01 | |
| 23 | 87.9% | 58.1 | $0.124 | 2026-09-01 | |
| 24 | 87.7% | 59.0 | $0.0088 | 2026-09-01 | |
| 25 | 87.6% | 55.1 | $0.018 | 2026-09-01 | |
| 26 | 87.5% | 56.1 | $0.043 | 2026-09-01 | |
| 27 | 87.5% | 63.1 | $0.051 | 2026-09-01 | |
| 28 | 87.4% | 52.3 | $0.040 | 2026-09-01 | |
| 29 | 87.3% | 56.1 | $0.066 | 2026-09-01 | |
| 30 | 87.3% | 64.2 | $0.0017 | 2026-09-01 | |
| 31 | 87.3% | 59.7 | $0.215 | 2026-09-01 | |
| 32 | 87.3% | 54.7 | $0.027 | 2026-09-01 | |
| 33 | 87.2% | 51.1 | $0.0071 | 2026-09-01 | |
| 34 | 87.2% | 57.4 | $0.0089 | 2026-09-01 | |
| 35 | 87.0% | 53.8 | $0.0032 | 2026-09-01 | |
| 36 | 86.9% | 55.4 | $0.012 | 2026-09-01 | |
| 37 | 86.8% | 58.8 | $0.017 | 2026-09-01 | |
| 38 | 86.7% | 51.9 | $0.014 | 2026-09-01 | |
| 39 | 86.7% | 60.1 | $0.0080 | 2026-09-01 | |
| 40 | 86.5% | 58.2 | $0.024 | 2026-09-01 | |
| 41 | 86.4% | 57.5 | $0.019 | 2026-09-01 | |
| 42 | 86.3% | 50.4 | $0.040 | 2026-09-01 | |
| 43 | 86.3% | 58.3 | $0.013 | 2026-09-01 | |
| 44 | 86.2% | 52.6 | $0.0011 | 2026-09-01 | |
| 45 | 86.2% | 59.9 | $0.037 | 2026-09-01 | |
| 46 | 86.2% | 57.2 | $0.0027 | 2026-09-01 | |
| 47 | 86.2% | 51.9 | $0.050 | 2026-09-01 | |
| 48 | 86.1% | 52.4 | $0.0011 | 2026-09-01 | |
| 49 | 86.0% | 56.2 | $0.0028 | 2026-09-01 | |
| 50 | 86.0% | 60.2 | $0.012 | 2026-09-01 | |
| 51 | 85.9% | 59.4 | $0.0079 | 2026-09-01 | |
| 52 | 85.8% | 56.5 | $0.0095 | 2026-09-01 | |
| 53 | 85.8% | 47.8 | $0.0045 | 2026-09-01 | |
| 54 | 85.8% | 55.4 | – | 2026-09-01 | |
| 55 | 85.6% | 55.1 | $0.012 | 2026-09-01 | |
| 56 | 85.6% | 52.0 | $0.0057 | 2026-09-01 | |
| 57 | 85.3% | 58.1 | $0.050 | 2026-09-01 | |
| 58 | 85.0% | 54.2 | $0.027 | 2026-09-01 | |
| 59 | 84.9% | 56.7 | $0.0011 | 2026-09-01 | |
| 60 | 84.6% | 55.5 | $0.0021 | 2026-09-01 |
関連するベンチマーク
MMLU-Proでの注目のモデル比較
引用表記:BenchLeader「MMLU-Proのリーダーボード」2026年11月16日時点のデータ、https://www.benchleader.com/ja/benchmarks/vals_mmlu_pro
MMLU-Pro:よくある質問
- MMLU-Proは何を測るベンチマークですか?
- MMLU-ProはMMLUを難しくした後継版です。14科目にわたる約12,000問で、各問題に選択肢が10個あり、推論を多く要する問題が増えています。元のMMLUにあった簡単すぎる問題やノイズの多い問題は取り除かれています。スコアは解けたタスクの割合(%)で示され、高いほど良い結果です。
- MMLU-Proの最高スコアは?
- 2026年11月16日時点で、MMLU-Proの最高スコアは92.4%で、Claude Fable 5.1が記録しています(結果の日付は2026年9月1日)。次点はClaude Opus 5の91.6%です。スコアはVals AIの公表値で、毎日読み直しています。
- MMLU-ProでトップのAIモデルは?
- 2026年11月16日時点で、MMLU-Proの首位はClaude Fable 5.1で、スコアは92.4%です(結果の日付は2026年9月1日)。続いてClaude Opus 5(91.6%)です。
- MMLU-Proの結果があるモデルはいくつですか?
- BenchLeaderでは133のモデル構成にMMLU-Proの結果があり、すべてVals AIから取得しています。
- MMLU-Proを運営しているのは誰で、どのくらいの頻度で更新されますか?
- MMLU-ProはVals AIが公開しています。BenchLeaderは公開された結果を1日1回読み直し、各結果の公開日を記録しています。
- MMLU-ProはBenchLeader Indexに含まれますか?
- はい。MMLU-ProはBenchLeader Indexの知識カテゴリに反映され、評価対象モデルの平均が50になるよう正規化されています。