待验证50% 置信基准精确时间
METR后续实验数据:回归开发者群体显示-18%的提速,置信区间-38%到+9%;新招募开发者显示-4%的提速,置信区间-15%到+9%,两个置信区间均跨越零。
1
来源数
50%
置信度
中期 (~90 天)
时效性
2026/10/18
首次发现
有效期至:2027/1/16
来源
METR研究失灵:开发者不愿离开AI,速度测量失效
rss2026/10/18
涉及实体
相关事实
待验证METR于2025年7月10日发表随机对照试验:16名资深开源开发者在真实仓库处理246个任务,使用AI工具后反而慢了19%,但事前预期提速24%、事后自认提速20%78% 相似待验证微软研究院和GitHub联合研究显示,经验较少的开发者使用Copilot报告的生产力提升幅度通常为40%-60%,远高于资深开发者的15%-25%74% 相似待验证如果开发者工作以高频迭代、原型开发为主,无每日上限加50倍用量的价值可能超过9%的性能差距;若对代码质量有极致要求,可保留切换到顶级付费模型的选项68% 相似待验证在两阶协调代理(coordination-proxy)开发对比中,基线与源作者编写的候选方案各完成 180/180 试验,候选方案少用了 37.11% 的 token、降低了 33.84% 的估算端点成本、减少了 11.63% 的步骤,但不能证明质量、延迟或生产环境行为上的改善67% 相似待验证开发者自述其维护工作占比在不同解读下会在8.7%到26.2%之间摇摆,因无法精确测量残差的具体构成。67% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1061006API
curl https://kongchang.com/api/v1/knowledge/claims/1061006MCP
get_claim(id=1061006)