Unverified50% confidenceBenchmarkExact time
SWE-bench Verified子集的通过率从2024年初不足5%跃升至49%
1
Sources
50%
Confidence
Medium-term (~90 days)
Relevance
7/6/2026
First Seen
Valid until: 10/4/2026
Sources
Spotify AI实践：3000名工程师如何用Agent重塑研发体系
bilibiliGelai_AI7/3/2026
Related Claims
Unverified顶尖模型在SWE-bench上的解题率从2023年的不足5%跃升至2025年的30%以上75% similarUnverified2023年初主流模型的SWE-bench得分普遍低于5%，到2025年中顶级模型已突破70%75% similarUnverified2024年部分模型在SWE-bench上的成功率提升至30%-50%区间74% similarUnverifiedSWE-bench基准上最优系统的解决率已从最初的不到5%提升至超过40%73% similarVerified2024年顶级模型在SWEbench-Verified上的通过率约为50-70%73% similar
Cite This Claim
Stable URI
https://kongchang.com/claim/113217API
curl https://kongchang.com/api/v1/knowledge/claims/113217MCP
get_claim(id=113217)