Unverified50% confidenceFactExact time
2024 年初顶尖智能体在 SWE-bench 的通过率不到 30%,到 2025 年中已有多个系统突破 90%
1
Sources
50%
Confidence
Medium-term (~90 days)
Relevance
8/17/2026
First Seen
Valid until: 11/15/2026
Sources
Related Claims
UnverifiedSWE-bench Verified上的AI通过率在一年前还不到40%,截至2025年中已超过72%76% similarUnverified2023年初主流模型的SWE-bench得分普遍低于5%,到2025年中顶级模型已突破70%74% similarVerified2024年顶级模型在SWEbench-Verified上的通过率约为50-70%72% similarUnverified顶尖模型在SWE-bench上的解题率从2023年的不足5%跃升至2025年的30%以上70% similarUnverified2024年部分模型在SWE-bench上的成功率提升至30%-50%区间70% similar
Cite This Claim
Stable URI
https://kongchang.com/claim/761981API
curl https://kongchang.com/api/v1/knowledge/claims/761981MCP
get_claim(id=761981)