待验证50% 置信事实精确时间

SWE Bench要求模型在真实GitHub仓库中解决实际issue，SWE Bench Pro是其难度更高的升级版

1

来源数

50%

置信度

长期有效

时效性

2026/9/16

首次发现

来源

Qwen 3.8 27B本地大模型实测：小体积如何逼近顶级闭源模型

涉及实体

SWE Benchconcept SWE Bench Proconcept

相关事实

已验证SWE-bench要求模型在真实GitHub仓库中定位并修复实际Issue80% 相似已验证SWE-bench由普林斯顿大学团队开发，Pro版本要求模型在真实GitHub代码仓库中定位Bug并生成修复补丁79% 相似已验证SWE-bench直接使用真实的GitHub Issue作为测试题目，要求模型在完整代码仓库中定位并修复Bug76% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/925183

API

curl https://kongchang.com/api/v1/knowledge/claims/925183

MCP

get_claim(id=925183)