待验证50% 置信事实精确时间
2020年Papers With Code统计表明，即使提供官方代码的论文，仍有约30%在换机器或换随机种子后出现显著性能波动
1
来源数
50%
置信度
长期有效
时效性
2026/8/16
首次发现
来源
相关事实
待验证研究表明，结构化的Prompt相比随意描述，可将代码生成的首次通过率从30%提升至70%以上70% 相似待验证2024 年的多项基准测试表明，经过严格安全对齐的模型在代码生成任务上的拒绝率比基座模型高出 15-30%，在创意写作任务上的自我审查率高达 40%67% 相似待验证斯坦福大学2023年的研究表明，引入明确的需求分析和设计阶段后，LLM生成代码的功能正确率提升约30%65% 相似待验证即使是最先进的代码模型，在声称'代码已通过测试'时，实际通过率也可能低于70%64% 相似待验证2023年的一项研究发现主流代码模型在生成API调用时的幻觉率可达15-25%，尤其在涉及较新或较冷门的库时更突出64% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/756926API
curl https://kongchang.com/api/v1/knowledge/claims/756926MCP
get_claim(id=756926)