BenchLeader

SWE Atlas v1.1: Codebase QnA 排行榜

截至 2026年11月16日,SWE Atlas v1.1: Codebase QnA 的最高分为 83.9%,由 Claude Fable 5.2(Anthropic)取得,领先于 Qwen3.8 Max(81.5%)。共有 28 个模型配置公布了结果(Scale AI SEAL,结果日期 2026年11月11日)。回答关于大型代码库的问题(SWE Atlas v1.1)。Scale AI。SWE Atlas v1.1: Codebase QnA 仅作参考展示,不计入 BenchLeader Index。

要点(截至 2026年11月16日)

  • Claude Fable 5.2 以 83.9% 保持 SWE Atlas v1.1: Codebase QnA 最高分(Scale AI SEAL,2026年11月11日)。
  • Qwen3.8 Max 以 81.5% 位列 SWE Atlas v1.1: Codebase QnA 第二(Scale AI SEAL,2026年11月11日)。
  • SWE Atlas v1.1: Codebase QnA:回答关于大型代码库的问题(SWE Atlas v1.1)。Scale AI(Scale AI SEAL)。
  • BenchLeader 上有 28 个模型配置公布了 SWE Atlas v1.1: Codebase QnA 结果(BenchLeader,2026年11月16日)。
  • SWE Atlas v1.1: Codebase QnA 不计入 BenchLeader Index,仅作参考展示(BenchLeader 方法论)。

回答关于大型代码库的问题(SWE Atlas v1.1)。Scale AI。

发布方
Scale AI SEAL
类别
编程
Index 权重
仅作参考
模型
28
数据截至
2026年11月16日
最新结果
2026年11月11日

Scale AI SEAL Leaderboards.

与此前同名的测试不可比较,旧测试的最终分数保留在 SWE Atlas v1.0: Codebase QnA。

28 / 28
#
1新Claude Fable 5.283.9%65.42026-11-11
2Qwen3.8 Maxmax81.5%58.72026-11-11
3Claude Fable 5.179.0%66.42026-11-06
4Claude Opus 5.577.4%61.02026-11-06
5Inkling 2 Small74.2%57.92026-11-06
6Claude Sonnet 5.574.2%–2026-11-06
7Muse Wonder73.4%64.42026-11-06
8Gemini 4 Carbon73.4%–2026-11-11
9Grok 4.773.4%–2026-11-06
10GPT-6.1 Sol71.0%62.02026-11-06
11DeepSeek V4.1 Flash71.0%–2026-11-06
12GPT-6 Astra70.2%66.42026-11-06
13Kimi K3.1 Pro70.2%61.82026-11-11
14GLM 5.370.2%–2026-11-11
15GLM 5.3 Flash66.9%57.82026-11-11
16Gemini 4 Argon65.3%64.42026-11-06
17Kimi K365.3%60.72026-11-06
18Claude Haiku 5.562.1%–2026-11-06
19Mistral Large 461.3%52.92026-11-11
20新Muse Ember61.3%–2026-11-11
21GPT-6.1 Terra54.0%–2026-11-06
22GPT-6 Luna50.8%–2026-11-06
23Muse Spark Open50.0%–2026-11-06
24MiniMax M349.2%56.12026-11-11
25Gemini 3.8 Flash45.2%56.42026-11-06
26Nemotron 3.5 Super VL26.6%45.82026-11-11
27Nemotron 3 Ultra21.8%42.12026-11-11
28gpt-oss-120b10.5%46.12026-11-11

更多编程基准测试 · 全部大模型基准测试

引用格式:BenchLeader,《SWE Atlas v1.1: Codebase QnA 排行榜》,数据截至 2026年11月16日,https://www.benchleader.com/zh/benchmarks/scale_swe_atlas_qna。

SWE Atlas v1.1: Codebase QnA:常见问题

SWE Atlas v1.1: Codebase QnA 衡量的是什么?
回答关于大型代码库的问题(SWE Atlas v1.1)。Scale AI。分数以完成任务的百分比表示,越高越好。
SWE Atlas v1.1: Codebase QnA 的最高分是多少?
截至 2026年11月16日,SWE Atlas v1.1: Codebase QnA 的最高分为 83.9%,由 Claude Fable 5.2 取得(结果日期 2026年11月11日),领先于 Qwen3.8 Max(81.5%)。分数来自 Scale AI SEAL,每天重新读取。
哪个 AI 模型在 SWE Atlas v1.1: Codebase QnA 上领先?
截至 2026年11月16日,SWE Atlas v1.1: Codebase QnA 排名第一的是 Claude Fable 5.2,分数为 83.9%(结果日期 2026年11月11日)。其后为 Qwen3.8 Max(81.5%)。
有多少模型有 SWE Atlas v1.1: Codebase QnA 结果?
BenchLeader 上有 28 个模型配置有 SWE Atlas v1.1: Codebase QnA 结果,全部取自 Scale AI SEAL。
SWE Atlas v1.1: Codebase QnA 由谁运行,多久更新一次?
SWE Atlas v1.1: Codebase QnA 由 Scale AI SEAL 发布。BenchLeader 每天重新读取一次公布的结果,并记录每个结果的发布日期。
SWE Atlas v1.1: Codebase QnA 是否计入 BenchLeader Index?
不计入。SWE Atlas v1.1: Codebase QnA 仅作参考展示,不计入综合分数。