Unverified50% confidenceBenchmarkExact time
SWE-bench基准上最优系统的解决率已从最初的不到5%提升至超过40%
1
Sources
50%
Confidence
Short-term (~14 days)
Relevance
8/18/2026
First Seen
Valid until: 9/1/2026
Sources
Related Claims
UnverifiedSWE-bench 发布初期顶级模型通过率不足 2%，当前领先系统通过率已突破 50%78% similarUnverifiedSWE-bench Verified子集的通过率从2024年初不足5%跃升至49%73% similarUnverifiedSWE-bench 是衡量模型在真实 GitHub Issue 上自主修复能力的基准，早期模型解决率不足 5%，2025 年主流产品已突破 50%70% similarUnverified在 SWE-bench 上早期模型解决率不足 5%，2025 年主流产品已突破 50%68% similarUnverified在SWE-bench Full版本上，多数模型的通过率仍低于20%68% similar
Cite This Claim
Stable URI
https://kongchang.com/claim/769922API
curl https://kongchang.com/api/v1/knowledge/claims/769922MCP
get_claim(id=769922)