[控场AI]
基准DeepSWE

DeepSWE v1.1

面向软件工程任务的AI能力基准测试,评估模型在真实生产仓库中的代码理解、重构与缺陷修复表现

核心事实

时间轴 (近 90 天)

10月19日

官方基准显示 DeepSWE v1.1 从 74.2 提升到 77.0(Mini-SWE-V2 环境),Terminal-Bench 4.0 从 31.2 提升到 42.3(Claude Code 环境)。

待验证50%
10月18日

官方自报数据显示,V4.1-Flash-1017 相比 V4.1-Flash 在 Terminal-Bench 4.0 上从 31.2 提升至 42.3(+11.1),HLE 从 36.8 提升至 42.6(+5.8),DeepSWE v1.1 从 74.2 提升至 77.0(+2.8),Automation-Bench 从 54.8 提升至 60.5(+5.7)。

待验证50%
10月17日

DeepSeek-V4.1-Flash-1017 在 DeepSWE v1.1 上得分 77.0,超过 Claude Opus 5 的 74.0。

已验证70%
10月17日

OpenRouter 模型页显示,在所有流量中 DeepSeek V4.1 Flash 约占 36% 的 token,GPT-6.1 Sol 约 18%。

部分验证65%
10月17日

V4.1-Flash-1017 在 DeepSWE 评测集上得分为 77.0 分。

已验证65%
10月13日

Gemini 4 Argon 在 DeepSWE v1.1 基准测试中取得 77.9% 的 SOTA 成绩。

待验证50%
10月13日

Argon 在 DeepSWE v1.1 上以 77.9% 领先 Opus 5.5 的 74.2%;在 Terminal-Bench 4.0 上,Opus 5.5 以 66.4% 对 57.4% 领先。

已过期60%
10月13日

在 DeepSWE v1.1(编程)基准测试中,Gemini 4 Argon 得分为 77.9%,Claude Opus 5.5 为 74.2%,GPT-6 Astra 为 74.1%。

已过期65%
10月12日

GLM-5.3-Flash 在 DeepSWE v1.1 得63.4分,比 GLM-5.2 的46.2分提升17.2分;HLE 得55.3分。

已过期50%
10月1日

在 Deep Study 软件工程测试中,Argon 得分 77.9%,高于 GPT-6 Astra 和 Cloud Opus 5.5(后两者约为 74%)

已过期65%

还有 2 条时间轴事件

全部知识事实 (8)

来源文章