GPT-5.1 vs Muse Spark
完整资料:GPT-5.1(OpenAI)和 Muse Spark(Meta),包括全部基准测试、价格和排名。
更新于 · 数据来自 10 个来源
截至 2026年11月16日,质量上 Muse Spark 领先 GPT-5.1(BenchLeader Index 64.2 比 57.5)。在两者都有成绩的所有类别中,Muse Spark 均领先。
要点(截至 2026年11月16日)
- GPT-5.1 的 BenchLeader Index 为 57.5,Muse Spark 为 64.2(BenchLeader,2026年11月16日)。
- GPT-5.1 每百万 token 混合价格为 $3.44(标价,2026年11月16日)。
- 在两者都有结果的 37 项基准测试中,Muse Spark 领先 30 项(BenchLeader,2026年11月16日)。
按用途怎么选
推荐模型的数值列在前面。类别得分采用 BenchLeader 标尺(50 为模型平均水平,15 分为一个标准差)。领先半个标准差及以上为“高”置信度;相差不到 1 分则视为“均可”。
| 用途 | 推荐 | 理由 | 置信度 |
|---|---|---|---|
| 编程 | Muse Spark | 类别得分 65 比 56;Arena Coding 1529 比 1492 | 高 |
| 智能体与工具调用 | Muse Spark | 类别得分 65 比 41;MCP Atlas 82.2% 比 50.1% | 高 |
| 数学 | 均可 | 类别得分 59 比 59;Arena Maths 1459 比 1469 | 均可 |
| 推理 | Muse Spark | 类别得分 67 比 53;GPQA Diamond 89.8% 比 87.6% | 高 |
| 知识 | Muse Spark | 类别得分 63 比 59;MMLU-Pro 87.3% 比 86.4% | 中 |
| 长文档 | 均可 | 类别得分 65 比 64;AA-LCR v1.1 80.0% 比 78.0% | 均可 |
| 图像及其他媒体 | Muse Spark | 类别得分 64 比 58;Arena Vision 1306 比 1249 | 中 |
| 指令遵循 | Muse Spark | 类别得分 77 比 71;IFBench 75.9% 比 72.9% | 中 |
| 对话质量(人类偏好) | Muse Spark | Arena 投票 68 比 64 | 中 |
| 低预算大批量 | 两者都不选 | 通常更小的模型更合适:便宜好用的大模型、最快的大模型 | – |
主要差异
- 质量上 Muse Spark 领先:64.2 比 57.5。
- GPT-5.1 (high) 在长上下文方面更强。
- Muse Spark 在智能体与工具、编程、人类偏好、指令遵循、知识、数学、多模态、推理方面更强。
概览
| 规格 | GPT-5.1 | Muse Spark |
|---|---|---|
| 提供商 | OpenAI | Meta |
| 发布日期 | 2025年11月12日 | 2026年4月8日 |
| 上下文窗口(token) | 400,000 | 262,144 |
| 对比时的配置 | GPT-5.1 (high) | Muse Spark |
| 开放权重 | 否 | 否 |
| 每百万 token 价格(输入 / 输出 / 缓存输入) | $1.25 / $10.00 / $0.125 | – |
逐类别对比
类别得分采用 BenchLeader 标尺:50 为参评模型的平均水平,15 分为一个标准差。差距不到 1 分视为持平。
| 类别 | GPT-5.1 (high) | Muse Spark | 领先者 |
|---|---|---|---|
| 推理 | 53.0 | 67.4 | Muse Spark |
| 编程 | 55.7 | 65.1 | Muse Spark |
| 智能体与工具 | 41.2 | 65.0 | Muse Spark |
| 数学 | 58.5 | 59.1 | 持平 |
| 知识 | 58.6 | 63.1 | Muse Spark |
| 指令遵循 | 71.4 | 76.9 | Muse Spark |
| 人类偏好 | 64.0 | 68.1 | Muse Spark |
| 多模态 | 57.9 | 64.2 | Muse Spark |
| 长上下文 | 64.6 | 63.6 | 持平 |
同一图表对比
各领域采用与 Index 相同的标尺,平均模型为 50 分。单击某个领域可查看构成它的基准测试。 可从列表中最多选择 5 个模型。
各来源的分歧
在两者都有结果的 37 项基准测试中,GPT-5.1 领先 6 项,Muse Spark 领先 30 项,1 项持平。所有同时评测两者的综合评分都认为 Muse Spark 更强。
| 综合 Index | GPT-5.1 (high) | Muse Spark | 领先者 |
|---|---|---|---|
| BenchLeader Index | 57.5 | 64.2 | Muse Spark |
| Arena Text | 1455 | 1489 | Muse Spark |
各发布方使用各自的任务、评测框架和推理强度设置,因此总体结论可能不同;BenchLeader 将它们统一到同一标尺上。† 表示同一模型在另一推理强度设置下的测量值(发布方未测试本页对比的设置)。
价格、速度与延迟
标价按每 1 个输出 token 对应 3 个输入 token 混合计算。每项任务的价格采用方法论页面中的 token 数量。每项基准测试任务的成本、token 数和耗时均为实测值,取自 Artificial Analysis 整个 Intelligence Index 测试的平均值。
| 指标 | GPT-5.1 (high) | Muse Spark |
|---|---|---|
| 每百万 token 混合价格 | $3.44 | – |
| 每百万 token 输入 / 输出 | $1.25 / $10.00 | – / – |
| 每百万 token 缓存输入 | $0.125 | – |
| 每项任务价格:聊天回复 | $0.0035 | – |
| 每项任务价格:总结一份 30 页的报告 | $0.021 | – |
| 每项任务价格:代码编辑 | $0.022 | – |
| 每项任务价格:智能体编程会话 | $0.115 | – |
| 每项任务价格:结构化信息提取 | $0.0045 | – |
| 智能体编程会话(输入大多命中缓存) | $0.064 | – |
| 输出速度 | 88 tok/s | – |
| 首次回答时间 | 36.8 秒 | – |
| 完整回答耗时(最近一次测量 2026年11月13日) | 80.1 秒 | – |
每个模型都按其排名最高的推理强度设置进行对比。GPT-5.1 (high) 得分 57.5,首个回答 token 需 37 秒;GPT-5.1 为 56.1(1 秒),GPT-5.1 (thinking) 为 54.6(1 秒)。Muse Spark 得分 64.2。推理强度越高,回答前思考越久:得分更高,但等待更长、计费 token 也更多。 推理强度如何影响得分和成本
全部基准测试
共 98 项基准测试,按类别分组;点击名称可查看该排行榜及领先模型。† 表示同一模型在另一推理强度设置下的测量值,仅供参考,不计入胜场。
| 指标 | 发布方 | GPT-5.1 (high) | Muse Spark |
|---|---|---|---|
| BenchLeader Index | BenchLeader | 57.5 | 64.2 |
| 智能体与工具得分 | BenchLeader | 41.2 | 65.0 |
| 编程得分 | BenchLeader | 55.7 | 65.1 |
| 人类偏好得分 | BenchLeader | 64.0 | 68.1 |
| 指令遵循得分 | BenchLeader | 71.4 | 76.9 |
| 知识得分 | BenchLeader | 58.6 | 63.1 |
| 长上下文得分 | BenchLeader | 64.6 | 63.6 |
| 数学得分 | BenchLeader | 58.5 | 59.1 |
| 多模态得分 | BenchLeader | 57.9 | 64.2 |
| 推理得分 | BenchLeader | 53.0 | 67.4 |
| 混合价格(美元/百万 token) | BenchLeader | $3.44 | – |
| 输出速度 | BenchLeader | 88 tok/s | – |
| 首次回答时间 | BenchLeader | 36.8 秒 | – |
| 上下文窗口 | BenchLeader | 400,000 token | 262,144 token |
| 推理 | |||
| GPQA Diamond | Epoch AI Benchmarking Hub | 87.6% | 89.8% |
| Humanity's Last Exam | Scale AI / CAIS | 23.7%† | 40.6% |
| SimpleBench | SimpleBench | 53.2% | – |
| Arena Hard Prompts | Arena (LMArena) | 1476 | 1506 |
| GPQA Diamond (AA) | Artificial Analysis | 87.3% | 88.4% |
| Humanity's Last Exam (AA) | Artificial Analysis | 28.5% | 40.7% |
| GPQA Diamond (Vals) | Vals AI | 86.6% | 89.7% |
| GPQA Diamond (HELM) | HELM Capabilities | 44.2%† | – |
| ARC-AGI-1 | ARC Prize | 72.8% | – |
| ARC-AGI-2 | ARC Prize | 17.6% | – |
| CritPt | Artificial Analysis | 4.9% | 11.3% |
| Arena Expert | Arena (LMArena) | 1481 | 1491 |
| Chess Puzzles | Epoch AI Benchmarking Hub | 42.0% | – |
| Mystery Game Puzzles | Epoch AI Benchmarking Hub | 16.0%† | – |
| CL-bench | Epoch AI Benchmarking Hub | 23.7% | – |
| CL-bench Life | Epoch AI Benchmarking Hub | 17.3% | – |
| LMCA | Epoch AI Benchmarking Hub | 43.9% | – |
| DTBench | Epoch AI Benchmarking Hub | 90.1% | – |
| ForecastBench | ForecastBench | 62.0%† | – |
| 编程 | |||
| SWE-bench Verified (Epoch) | Epoch AI Benchmarking Hub | 68.0% | – |
| SciCode | SciCode | 43.3%† | 51.5% |
| WeirdML | WeirdML | 60.8% | – |
| GSO-Bench | GSO-Bench | 13.7% | – |
| Arena Coding | Arena (LMArena) | 1492 | 1529 |
| Arena WebDev | Arena (LMArena) | 1342† | – |
显示全部 98 项基准测试
| 指标 | 发布方 | GPT-5.1 (high) | Muse Spark |
|---|---|---|---|
| 编程 | |||
| LiveCodeBench | Vals AI | 86.5% | – |
| SWE-bench (Vals) | Vals AI | 69.8% | 74.4% |
| SWE-Bench Pro | Scale AI SEAL | – | 55.0% |
| SWE-bench Verified (bash only) | SWE-bench | 66.0%† | – |
| SWE-bench Verified (any scaffold) | SWE-bench | 66.0%† | – |
| Vibe Code Bench v1.1 | Vals AI | 24.6% | 19.7% |
| SWE-Bench Pro (private) | Scale AI SEAL | – | 44.7% |
| SWE Atlas v1.0: Codebase QnA | Scale AI SEAL | – | 24.2% |
| SWE Atlas v1.0: Test Writing | Scale AI SEAL | – | 31.1% |
| ALE-Bench | Epoch AI Benchmarking Hub | 1192.2 | – |
| Terminal-Bench 2.1 (AA) | Artificial Analysis | 52.4% | 62.2% |
| Design Arena Website | Design Arena | 1179 | 1253 |
| LiveCodeBench (AA) | Artificial Analysis | 86.8% | – |
| 智能体与工具 | |||
| Terminal-Bench | Terminal-Bench | 47.6%† | – |
| Terminal-Bench Hard | Artificial Analysis | 45.5% | 45.5% |
| τ²-Bench Telecom (AA) | Artificial Analysis | 81.9% | 91.5% |
| MCP Atlas | Scale AI SEAL | 50.1% | 82.2% |
| GDPval-AA v2.1 | Artificial Analysis | 834 | 1006 |
| τ³-Banking (AA) | Artificial Analysis | 15.9% | – |
| Poker Agent | Vals AI | 1038.6%† | – |
| Terminal-Bench 2.0 (Vals) | Vals AI | 44.9% | 59.5% |
| Arena Search | Arena (LMArena) | 1184† | – |
| DeepResearch Bench | DeepResearch Bench | 42.8%† | – |
| Vending-Bench 2 | Andon Labs | 1473.4† | – |
| AA-Briefcase v1.1 | Artificial Analysis | – | 646 |
| Design Arena Agentic | Design Arena | 1009† | – |
| 数学 | |||
| OTIS Mock AIME | Epoch AI Benchmarking Hub | 88.6% | 88.9% |
| ProofBench | Vals AI | – | 17.0% |
| AIME (Vals) | Vals AI | 93.3% | 96.9% |
| MGSM | Vals AI | 93.0% | – |
| MathArena Apex | MathArena | 1.0% | – |
| Omni-MATH (HELM) | HELM Capabilities | 46.4%† | – |
| Arena Maths | Arena (LMArena) | 1459 | 1469 |
| AIME 2025 (AA) | Artificial Analysis | 94.0% | – |
| 知识 | |||
| SimpleQA Verified | Epoch AI Benchmarking Hub | 48.0% | – |
| MMLU-Pro | Vals AI | 86.4% | 87.3% |
| LegalBench | Vals AI | 85.7% | 84.2% |
| CorpFin | Vals AI | 63.8% | 65.1% |
| TaxEval | Vals AI | 74.9% | 77.7% |
| MedQA | Vals AI | 96.4% | – |
| PRBench Finance | Scale AI SEAL | 48.0%† | 52.4% |
| PRBench Legal | Scale AI SEAL | 49.3%† | 52.3% |
| MultiNRC | Scale AI SEAL | 49.0%† | 59.0% |
| MMLU-Pro (HELM) | HELM Capabilities | 57.9%† | – |
| CaseLaw v2 | Vals AI | 73.4% | 63.1% |
| MedCode | Vals AI | 52.7% | 51.3% |
| MedScribe | Vals AI | 88.1% | 85.9% |
| Global-MMLU-Lite (AA) | Artificial Analysis | 90.6% | – |
| 指令遵循 | |||
| IFBench | Artificial Analysis | 72.9% | 75.9% |
| MultiChallenge | Scale AI SEAL | 63.4%† | 75.5% |
| TutorBench | Scale AI SEAL | 54.1%† | 68.5% |
| IFEval (HELM) | HELM Capabilities | 93.5%† | – |
| WildBench (HELM) | HELM Capabilities | 86.3%† | – |
| Arena Instruction Following | Arena (LMArena) | 1450 | 1465 |
| 人类偏好 | |||
| Arena Text | Arena (LMArena) | 1455 | 1489 |
| Arena Creative Writing | Arena (LMArena) | 1428 | 1464 |
| Arena Multi-turn | Arena (LMArena) | 1464 | 1493 |
| Arena Longer Queries | Arena (LMArena) | 1460 | 1476 |
| 多模态 | |||
| Arena Vision | Arena (LMArena) | 1249 | 1306 |
| MMMU-Pro | Artificial Analysis | 75.5% | 80.5% |
| VISTA | Scale AI SEAL | 43.8%† | – |
| MMMU-Pro (Vals) | Vals AI | 83.2% | 87.4% |
| MortgageTax | Vals AI | 61.4% | – |
| VPCT | Epoch AI Benchmarking Hub | 58.7% | – |
| 长上下文 | |||
| AA-LCR v1.1 | Artificial Analysis | 80.0% | 78.0% |
| Arena Document | Arena (LMArena) | 1416† | 1467 |
| 综合 | |||
| Epoch Capabilities Index | Epoch AI Benchmarking Hub | 150.9† | 153.1 |
| AA Intelligence Index v4.3.2 | Artificial Analysis | 24.7 | 31.3 |
| AA Progress Index v1 | Artificial Analysis | 275.7 | 289.1 |
| HELM Capabilities mean | HELM Capabilities | 65.6%† | – |
| 安全与诚实 | |||
| FORTRESS | Scale AI SEAL | 25.7%† | 20.2% |
| MASK | Scale AI SEAL | 86.3%† | – |
| 元数据 | |||
| AA Openness Index | Artificial Analysis | 5.6 | – |
数据截至 2026年11月16日。对比的是每个模型的最佳配置;每项分数的来源链接都在模型页面上。
变化
- GPT-5.1 (high):2 项新结果(GDPval-AA v2.1, AIME 2025 (AA))。
- Muse Spark:2 项新结果(GDPval-AA v2.1, AA-Briefcase v1.1)。
- Muse Spark:BenchLeader Index 64.6 → 64.1。
- Muse Spark:1 项分数修订。
- GPT-5.1 (high):1 项新结果(AA Progress Index v1)。
- Muse Spark:1 项新结果(AA Progress Index v1)。
- GPT-5.1 (high):1 项新结果(Global-MMLU-Lite (AA))。
- GPT-5.1 (high):BenchLeader Index 58.4 → 57.9。
相关对比
- Muse Spark vs Claude Fable 5.2
- Muse Spark vs Gemini 4 Carbon
- Muse Spark vs Claude Opus 5.5
- Muse Spark vs GPT-6 Astra
- Muse Spark vs Claude Fable 5.1
- Muse Spark vs GPT-6.1 Sol
- Muse Spark vs Claude Fable 5
- Muse Spark vs GPT-5.6 Sol
排行榜: 综合最佳大模型 · 最适合智能体的大模型 · 便宜好用的大模型
GPT-5.1 vs Muse Spark:常见问题
- Muse Spark 比 GPT-5.1 更好吗?
- 质量上 Muse Spark 领先:64.2 比 57.5。BenchLeader Index 综合了所有第三方质量基准测试;截至 2026年11月16日,Muse Spark 总体领先,但请结合你的用途查看各类别得分。
- 编程用 GPT-5.1 还是 Muse Spark 更好?
- Muse Spark 在编程方面得分更高(类别得分 65 比 56,50 为平均水平)。在两者共同的最主要编程基准测试 Arena Coding 上,GPT-5.1 为 1492,Muse Spark 为 1529。
- 智能体和工具调用用 GPT-5.1 还是 Muse Spark 更好?
- Muse Spark 在智能体任务方面得分更高(类别得分 65 比 41,50 为平均水平)。在两者共同的最主要智能体与工具基准测试 MCP Atlas 上,GPT-5.1 为 50.1%,Muse Spark 为 82.2%。
- 处理长文档哪个更好?
- 两者在长上下文基准测试上持平(65 比 64)。GPT-5.1 支持更长的上下文:400,000 token,Muse Spark 为 262,144 token。
- 第三方基准测试对 GPT-5.1 和 Muse Spark 的看法一致吗?
- 在两者都有结果的 37 项基准测试中,GPT-5.1 领先 6 项,Muse Spark 领先 30 项,1 项持平。所有同时评测两者的综合评分都认为 Muse Spark 更强。
更多问题(1)
- Muse Spark 是什么时候发布的?
- Muse Spark 于 2026年4月8日 发布。