Omni-MATH (HELM)のリーダーボード
別の検索名:MathHELM, Omni-MATH · HELM Capabilities
2026年11月16日時点で、Omni-MATH (HELM)(別名MathHELM)の最高スコアは72.2%で、GPT-5 mini(OpenAI)が記録しています。次点はo4-miniの72.0%です。公表された結果があるのは68のモデル構成です(HELM Capabilities、結果の日付は2025年11月24日)。Omni-MATHは、多くの分野と難易度にわたるオリンピックレベルの数学問題のセットで、答えは参照解答と照合して確認されます。Omni-MATH (HELM)はBenchLeader Indexの数学スコアに反映されます。
要点(2026年11月16日時点)
- GPT-5 miniがOmni-MATH (HELM)の最高スコア72.2%を記録しています(HELM Capabilities、2025年11月24日)。
- Omni-MATH (HELM)の2位はo4-miniで、72.0%です(HELM Capabilities、2025年11月24日)。
- Omni-MATH (HELM):オリンピック級の数学の問題。Stanford CRFMのHELMが実施(HELM Capabilities)。
- BenchLeaderでは68のモデル構成にOmni-MATH (HELM)の公表結果があります(BenchLeader、2026年11月16日)。
- Omni-MATH (HELM)はBenchLeader Indexの数学カテゴリに反映されます(BenchLeaderの評価方法)。
オリンピック級の数学の問題。Stanford CRFMのHELMが実施。
- カテゴリ
- 数学
- Indexでの重み
- 1.0
- モデル
- 68
- データ基準日
- 2026年11月16日
Stanford Center for Research on Foundation Models (crfm.stanford.edu), Apache-2.0 results.
どんなテストか
Omni-MATHは、多くの分野と難易度にわたるオリンピックレベルの数学問題のセットで、答えは参照解答と照合して確認されます。
採点方法
正答率で、Stanford CRFMのHELMがすべてのモデルを同じプロンプトで実行しています。
注意点
オリンピック問題の答え合わせは完璧ではありません。また、HELMは掲載上の注記がない限り長い推論の予算なしでモデルを実行するため、スコアは各ラボがテスト時の計算量を大きくして報告する値を下回ります。
- 1GPT-5 mini72.2%
- 2o4-mini72.0%
- 3Qwen3 235B A22B 250771.8%
- 4o371.4%
- 5gpt-oss-120b68.8%
- 6Kimi K265.4%
- 7GPT-564.7%
- 8Claude Opus 4 (thinking)61.6%
- 9Grok 460.3%
- 10Claude Sonnet 4 (thinking)60.2%
- 11gpt-oss-20b56.5%
- 12Claude Haiku 4.556.1%
- 13Gemini 3 Pro55.6%
- 14Claude Sonnet 4.555.3%
- 15Qwen3 235B A22B54.8%
| # | ||||
|---|---|---|---|---|
| 1 | 72.2% | 56.6 | 2025-11-24 | |
| 2 | 72.0% | 55.2 | 2025-11-24 | |
| 3 | 71.8% | 50.7 | 2025-11-24 | |
| 4 | 71.4% | 60.4 | 2025-11-24 | |
| 5 | 68.8% | 46.1 | 2025-11-24 | |
| 6 | 65.4% | 51.1 | 2025-11-24 | |
| 7 | 64.7% | 56.6 | 2025-11-24 | |
| 8 | 61.6% | 55.7 | 2025-11-24 | |
| 9 | 60.3% | 58.1 | 2025-11-24 | |
| 10 | 60.2% | 53.8 | 2025-11-24 | |
| 11 | 56.5% | 44.5 | 2025-11-24 | |
| 12 | 56.1% | 47.7 | 2025-11-24 | |
| 13 | 55.6% | 60.0 | 2025-11-24 | |
| 14 | 55.3% | 53.8 | 2025-11-24 | |
| 15 | 54.8% | 50.1 | 2025-11-24 | |
| 16 | 54.7% | 56.2 | 2025-11-24 | |
| 17 | 51.3% | 50.0 | 2025-11-24 | |
| 18 | 51.1% | 51.9 | 2025-11-24 | |
| 19 | 49.1% | 44.7 | 2025-11-24 | |
| 20 | 48.0% | 48.3 | 2025-11-24 | |
| 21 | 47.1% | 48.7 | 2025-11-24 | |
| 22 | 46.7% | 52.2 | 2025-11-24 | |
| 23 | 46.4% | 56.1 | 2025-11-24 | |
| 24 | 46.4% | 50.9 | 2025-11-24 | |
| 25 | 45.9% | 43.5 | 2025-11-24 | |
| 26 | 42.4% | 49.1 | 2025-11-24 | |
| 27 | 42.2% | 41.8 | 2025-11-24 | |
| 28 | 41.6% | 55.2 | 2025-11-24 | |
| 29 | 41.5% | – | 2025-11-24 | |
| 30 | 40.3% | 44.3 | 2025-11-24 | |
| 31 | 39.1% | 46.7 | 2025-11-24 | |
| 32 | 38.4% | 52.4 | 2025-11-24 | |
| 33 | 37.4% | 48.0 | 2025-11-24 | |
| 34 | 37.3% | 38.2 | 2025-11-24 | |
| 35 | 36.7% | 36.9 | 2025-11-24 | |
| 36 | 36.4% | 41.4 | 2025-11-24 | |
| 37 | 35.0% | 45.1 | 2025-11-24 | |
| 38 | 33.0% | 49.2 | 2025-11-24 | |
| 39 | 33.0% | 43.1 | 2025-11-24 | |
| 40 | 32.0% | – | 2025-11-24 | |
| 41 | 31.8% | 52.0 | 2025-11-24 | |
| 42 | 30.5% | 38.2 | 2025-11-24 | |
| 43 | 29.6% | – | 2025-11-24 | |
| 44 | 29.5% | – | 2025-11-24 | |
| 45 | 29.4% | 39.8 | 2025-11-24 | |
| 46 | 29.3% | 42.8 | 2025-11-24 | |
| 47 | 28.1% | 42.5 | 2025-11-24 | |
| 48 | 28.0% | 35.2 | 2025-11-24 | |
| 49 | 27.6% | 46.8 | 2025-11-24 | |
| 50 | 24.9% | 41.8 | 2025-11-24 | |
| 51 | 24.8% | 38.4 | 2025-11-24 | |
| 52 | 24.2% | 40.5 | 2025-11-24 | |
| 53 | 23.3% | 38.2 | 2025-11-24 | |
| 54 | 22.4% | 38.7 | 2025-11-24 | |
| 55 | 21.4% | 39.2 | 2025-11-24 | |
| 56 | 21.0% | 40.7 | 2025-11-24 | |
| 57 | 20.9% | 36.2 | 2025-11-24 | |
| 58 | 17.6% | – | 2025-11-24 | |
| 59 | 16.3% | 37.4 | 2025-11-24 | |
| 60 | 16.1% | – | 2025-11-24 |
引用表記:BenchLeader「Omni-MATH (HELM)のリーダーボード」2026年11月16日時点のデータ、https://www.benchleader.com/ja/benchmarks/helm_omni_math
Omni-MATH (HELM):よくある質問
- Omni-MATH (HELM)は何を測るベンチマークですか?
- Omni-MATHは、多くの分野と難易度にわたるオリンピックレベルの数学問題のセットで、答えは参照解答と照合して確認されます。スコアは解けたタスクの割合(%)で示され、高いほど良い結果です。
- Omni-MATH (HELM)の最高スコアは?
- 2026年11月16日時点で、Omni-MATH (HELM)の最高スコアは72.2%で、GPT-5 miniが記録しています(結果の日付は2025年11月24日)。次点はo4-miniの72.0%です。スコアはHELM Capabilitiesの公表値で、毎日読み直しています。
- Omni-MATH (HELM)でトップのAIモデルは?
- 2026年11月16日時点で、Omni-MATH (HELM)の首位はGPT-5 miniで、スコアは72.2%です(結果の日付は2025年11月24日)。続いてo4-mini(72.0%)です。
- Omni-MATH (HELM)の結果があるモデルはいくつですか?
- BenchLeaderでは68のモデル構成にOmni-MATH (HELM)の結果があり、すべてHELM Capabilitiesから取得しています。
- Omni-MATH (HELM)を運営しているのは誰で、どのくらいの頻度で更新されますか?
- Omni-MATH (HELM)はHELM Capabilitiesが公開しています。BenchLeaderは公開された結果を1日1回読み直し、各結果の公開日を記録しています。
- Omni-MATH (HELM)はBenchLeader Indexに含まれますか?
- はい。Omni-MATH (HELM)はBenchLeader Indexの数学カテゴリに反映され、評価対象モデルの平均が50になるよう正規化されています。