ITBench SRE (AA)のリーダーボード
2026年11月16日時点で、ITBench SRE (AA)の最高スコアは56.2%で、GPT-5.6 Sol(OpenAI)が記録しています。次点はStep 5 Previewの55.6%です。公表された結果があるのは45のモデル構成です(Artificial Analysis、結果の日付は2026年7月9日)。ITBench SREは、稼働中のIT環境にエージェントを置き、オンコール対応のエンジニアのようにインシデントを診断して修正させます。ITBench SRE (AA)は参考として掲載しており、BenchLeader Indexには含まれません。
要点(2026年11月16日時点)
- GPT-5.6 SolがITBench SRE (AA)の最高スコア56.2%を記録しています(Artificial Analysis、2026年7月9日)。
- ITBench SRE (AA)の2位はStep 5 Previewで、55.6%です(Artificial Analysis、2026年9月18日)。
- ITBench SRE (AA):実際に動いているIT環境でのサイト信頼性(SRE)のインシデント対応。Artificial Analysisが実施(Artificial Analysis)。
- BenchLeaderでは45のモデル構成にITBench SRE (AA)の公表結果があります(BenchLeader、2026年11月16日)。
- ITBench SRE (AA)はBenchLeader Indexには反映されず、参考として掲載しています(BenchLeaderの評価方法)。
実際に動いているIT環境でのサイト信頼性(SRE)のインシデント対応。Artificial Analysisが実施。
- カテゴリ
- エージェント・ツール
- Indexでの重み
- 参考のみ
- モデル
- 45
- データ基準日
- 2026年11月16日
Source: Artificial Analysis (artificialanalysis.ai). Data taken from the public leaderboard.
どんなテストか
ITBench SREは、稼働中のIT環境にエージェントを置き、オンコール対応のエンジニアのようにインシデントを診断して修正させます。
採点方法
解決できたインシデントの割合で、Artificial Analysisが実行しています。
注意点
結果のあるモデルはまだ少なく、各タスクも長いため、スコアは変動しやすくなります。
- 1GPT-5.6 Sol (max)56.2%
- 2Step 5 Preview55.6%
- 3Gemini 3.8 Flash (high)52.5%
- 4GLM 5.3 Flash51.2%
- 5GPT-5.6 Terra (max)51.0%
- 6Claude Fable 5.1 (max)49.5%
- 7GPT-6 Sol (max)49.4%
- 8GPT-6 Astra (max)48.6%
- 9Kimi K3 (max)47.7%
- 10DeepSeek V4.1 Flash (max)46.9%
- 11Claude Opus 4.7 (max)46.7%
- 12GLM 5.3 (max)46.1%
- 13GPT-5.5 (xhigh)45.8%
- 14GLM 5.2 (max)42.7%
- 15Qwen3.7 (max)42.5%
45件中45件
| # | ||||
|---|---|---|---|---|
| 1 | 56.2% | 65.3 | 2026-07-09 | |
| 2 | 55.6% | 56.0 | 2026-09-18 | |
| 3 | 52.5% | 59.4 | 2026-09-02 | |
| 4 | 51.2% | 57.8 | 2026-08-26 | |
| 5 | 51.0% | 59.5 | 2026-07-09 | |
| 6 | 49.5% | 66.7 | 2026-09-01 | |
| 7 | 49.4% | 62.6 | 2026-09-22 | |
| 8 | 48.6% | 67.3 | 2026-09-03 | |
| 9 | 47.7% | 60.2 | 2026-07-16 | |
| 10 | 46.9% | 58.5 | 2026-09-10 | |
| 11 | 46.7% | 59.7 | 2026-04-16 | |
| 12 | 46.1% | 58.8 | 2026-08-18 | |
| 13 | 45.8% | 64.1 | 2026-04-23 | |
| 14 | 42.7% | 58.9 | 2026-06-16 | |
| 15 | 42.5% | 60.0 | 2026-05-19 | |
| 16 | 42.1% | 57.4 | 2026-09-21 | |
| 17 | 40.4% | 62.5 | 2026-05-19 | |
| 18 | 40.3% | 56.2 | 2026-07-09 | |
| 19 | 40.3% | 58.7 | 2026-09-02 | |
| 20 | 40.3% | – | 2026-04-07 | |
| 21 | 39.8% | 56.1 | 2026-02-17 | |
| 22 | 38.3% | – | 2026-04-24 | |
| 23 | 38.2% | 68.4 | 2026-09-22 | |
| 24 | 38.2% | – | 2026-04-22 | |
| 25 | 37.3% | 46.6 | 2026-04-02 | |
| 26 | 35.5% | – | 2026-02-24 | |
| 27 | 35.2% | 55.1 | 2026-03-17 | |
| 28 | 34.1% | 56.4 | 2026-02-16 | |
| 29 | 33.2% | 60.6 | 2026-09-02 | |
| 30 | 32.7% | 56.5 | 2026-04-30 | |
| 31 | 31.5% | – | 2026-04-24 | |
| 32 | 31.2% | 59.3 | 2026-04-20 | |
| 33 | 30.3% | 59.9 | 2026-02-19 | |
| 34 | 30.3% | 53.0 | 2026-05-29 | |
| 35 | 27.3% | 45.7 | 2025-10-15 | |
| 36 | 26.5% | 56.6 | 2026-03-18 | |
| 37 | 24.4% | 53.9 | 2026-03-17 | |
| 38 | 23.6% | 50.9 | 2026-04-02 | |
| 39 | 21.5% | – | 2026-02-24 | |
| 40 | 18.6% | 44.7 | 2026-03-17 | |
| 41 | 17.9% | 43.1 | 2025-11-19 | |
| 42 | 12.9% | 41.8 | 2026-03-17 | |
| 43 | 5.7% | 45.3 | 2025-08-05 | |
| 44 | 1.1% | 51.1 | 2026-03-11 | |
| 45 | 0.6% | 39.9 | 2024-12-06 |
エージェント・ツールのベンチマークをもっと見る · LLMベンチマーク一覧
関連するベンチマーク
ITBench SRE (AA)での注目のモデル比較
引用表記:BenchLeader「ITBench SRE (AA)のリーダーボード」2026年11月16日時点のデータ、https://www.benchleader.com/ja/benchmarks/aa_itbench_sre
ITBench SRE (AA):よくある質問
- ITBench SRE (AA)は何を測るベンチマークですか?
- ITBench SREは、稼働中のIT環境にエージェントを置き、オンコール対応のエンジニアのようにインシデントを診断して修正させます。スコアは解けたタスクの割合(%)で示され、高いほど良い結果です。
- ITBench SRE (AA)の最高スコアは?
- 2026年11月16日時点で、ITBench SRE (AA)の最高スコアは56.2%で、GPT-5.6 Solが記録しています(結果の日付は2026年7月9日)。次点はStep 5 Previewの55.6%です。スコアはArtificial Analysisの公表値で、毎日読み直しています。
- ITBench SRE (AA)でトップのAIモデルは?
- 2026年11月16日時点で、ITBench SRE (AA)の首位はGPT-5.6 Solで、スコアは56.2%です(結果の日付は2026年7月9日)。続いてStep 5 Preview(55.6%)です。
- ITBench SRE (AA)の結果があるモデルはいくつですか?
- BenchLeaderでは45のモデル構成にITBench SRE (AA)の結果があり、すべてArtificial Analysisから取得しています。
- ITBench SRE (AA)を運営しているのは誰で、どのくらいの頻度で更新されますか?
- ITBench SRE (AA)はArtificial Analysisが公開しています。BenchLeaderは公開された結果を1日1回読み直し、各結果の公開日を記録しています。
- ITBench SRE (AA)はBenchLeader Indexに含まれますか?
- いいえ。ITBench SRE (AA)は参考として掲載していますが、総合スコアには含めていません。