SWE Atlas v1.1: Codebase QnA 排行榜
截至 2026年11月16日,SWE Atlas v1.1: Codebase QnA 的最高分为 83.9%,由 Claude Fable 5.2(Anthropic)取得,领先于 Qwen3.8 Max(81.5%)。共有 28 个模型配置公布了结果(Scale AI SEAL,结果日期 2026年11月11日)。回答关于大型代码库的问题(SWE Atlas v1.1)。Scale AI。SWE Atlas v1.1: Codebase QnA 仅作参考展示,不计入 BenchLeader Index。
要点(截至 2026年11月16日)
- Claude Fable 5.2 以 83.9% 保持 SWE Atlas v1.1: Codebase QnA 最高分(Scale AI SEAL,2026年11月11日)。
- Qwen3.8 Max 以 81.5% 位列 SWE Atlas v1.1: Codebase QnA 第二(Scale AI SEAL,2026年11月11日)。
- SWE Atlas v1.1: Codebase QnA:回答关于大型代码库的问题(SWE Atlas v1.1)。Scale AI(Scale AI SEAL)。
- BenchLeader 上有 28 个模型配置公布了 SWE Atlas v1.1: Codebase QnA 结果(BenchLeader,2026年11月16日)。
- SWE Atlas v1.1: Codebase QnA 不计入 BenchLeader Index,仅作参考展示(BenchLeader 方法论)。
回答关于大型代码库的问题(SWE Atlas v1.1)。Scale AI。
- 类别
- 编程
- Index 权重
- 仅作参考
- 模型
- 28
- 数据截至
- 2026年11月16日
- 最新结果
- 2026年11月11日
Scale AI SEAL Leaderboards.
与此前同名的测试不可比较,旧测试的最终分数保留在 SWE Atlas v1.0: Codebase QnA。
- 1Claude Fable 5.283.9%
- 2Qwen3.8 Max (max)81.5%
- 3Claude Fable 5.179.0%
- 4Claude Opus 5.577.4%
- 5Inkling 2 Small74.2%
- 6Claude Sonnet 5.574.2%
- 7Muse Wonder73.4%
- 8Gemini 4 Carbon73.4%
- 9Grok 4.773.4%
- 10GPT-6.1 Sol71.0%
- 11DeepSeek V4.1 Flash71.0%
- 12GPT-6 Astra70.2%
- 13Kimi K3.1 Pro70.2%
- 14GLM 5.370.2%
- 15GLM 5.3 Flash66.9%
28 / 28
| # | ||||
|---|---|---|---|---|
| 1 | 新 | 83.9% | 65.4 | 2026-11-11 |
| 2 | 81.5% | 58.7 | 2026-11-11 | |
| 3 | 79.0% | 66.4 | 2026-11-06 | |
| 4 | 77.4% | 61.0 | 2026-11-06 | |
| 5 | 74.2% | 57.9 | 2026-11-06 | |
| 6 | 74.2% | – | 2026-11-06 | |
| 7 | 73.4% | 64.4 | 2026-11-06 | |
| 8 | 73.4% | – | 2026-11-11 | |
| 9 | 73.4% | – | 2026-11-06 | |
| 10 | 71.0% | 62.0 | 2026-11-06 | |
| 11 | 71.0% | – | 2026-11-06 | |
| 12 | 70.2% | 66.4 | 2026-11-06 | |
| 13 | 70.2% | 61.8 | 2026-11-11 | |
| 14 | 70.2% | – | 2026-11-11 | |
| 15 | 66.9% | 57.8 | 2026-11-11 | |
| 16 | 65.3% | 64.4 | 2026-11-06 | |
| 17 | 65.3% | 60.7 | 2026-11-06 | |
| 18 | 62.1% | – | 2026-11-06 | |
| 19 | 61.3% | 52.9 | 2026-11-11 | |
| 20 | 新 | 61.3% | – | 2026-11-11 |
| 21 | 54.0% | – | 2026-11-06 | |
| 22 | 50.8% | – | 2026-11-06 | |
| 23 | 50.0% | – | 2026-11-06 | |
| 24 | 49.2% | 56.1 | 2026-11-11 | |
| 25 | 45.2% | 56.4 | 2026-11-06 | |
| 26 | 26.6% | 45.8 | 2026-11-11 | |
| 27 | 21.8% | 42.1 | 2026-11-11 | |
| 28 | 10.5% | 46.1 | 2026-11-11 |
相关基准测试
SWE Atlas v1.1: Codebase QnA 上的热门模型对比
引用格式:BenchLeader,《SWE Atlas v1.1: Codebase QnA 排行榜》,数据截至 2026年11月16日,https://www.benchleader.com/zh/benchmarks/scale_swe_atlas_qna。
SWE Atlas v1.1: Codebase QnA:常见问题
- SWE Atlas v1.1: Codebase QnA 衡量的是什么?
- 回答关于大型代码库的问题(SWE Atlas v1.1)。Scale AI。分数以完成任务的百分比表示,越高越好。
- SWE Atlas v1.1: Codebase QnA 的最高分是多少?
- 截至 2026年11月16日,SWE Atlas v1.1: Codebase QnA 的最高分为 83.9%,由 Claude Fable 5.2 取得(结果日期 2026年11月11日),领先于 Qwen3.8 Max(81.5%)。分数来自 Scale AI SEAL,每天重新读取。
- 哪个 AI 模型在 SWE Atlas v1.1: Codebase QnA 上领先?
- 截至 2026年11月16日,SWE Atlas v1.1: Codebase QnA 排名第一的是 Claude Fable 5.2,分数为 83.9%(结果日期 2026年11月11日)。其后为 Qwen3.8 Max(81.5%)。
- 有多少模型有 SWE Atlas v1.1: Codebase QnA 结果?
- BenchLeader 上有 28 个模型配置有 SWE Atlas v1.1: Codebase QnA 结果,全部取自 Scale AI SEAL。
- SWE Atlas v1.1: Codebase QnA 由谁运行,多久更新一次?
- SWE Atlas v1.1: Codebase QnA 由 Scale AI SEAL 发布。BenchLeader 每天重新读取一次公布的结果,并记录每个结果的发布日期。
- SWE Atlas v1.1: Codebase QnA 是否计入 BenchLeader Index?
- 不计入。SWE Atlas v1.1: Codebase QnA 仅作参考展示,不计入综合分数。