待验证85% 置信事实时间未知

智能体PR的Issue解决率明显低于人类，虽然PR能通过评审但并没有完全解决对应的需求

1

来源数

85%

置信度

中期 (~90 天)

时效性

2026/5/31

首次发现

有效期至：2026/8/29

来源

11万PR实测：5款AI编码Agent谁更靠谱？

bilibili熊二等兵

相关事实

待验证当前顶尖AI模型在CTF基准上的得分仍远低于人类专家水平，尤其是涉及动态调试和二进制分析的题目类别66% 相似待验证对于控制流平坦化等高级混淆保护手段，AI的分析能力可能大打折扣66% 相似待验证智能体提交的PR平均变更规模明显小于人类，大多是几十行的小改动，而人类开发者的PR经常包含几百行甚至上千行的功能提交65% 相似待验证越专业、越小众的知识领域，AI出错的概率反而越低，因为信息来源相对权威65% 相似待验证医疗AI中的选择性预测机制在低置信度时拒绝答案转介人工审核，被证明比强制输出答案更能降低临床风险65% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/3079

API

curl https://kongchang.com/api/v1/knowledge/claims/3079

MCP

get_claim(id=3079)