待验证50% 置信基准精确时间
在HumanEval pass@1对比中，phi-1-small（350M参数）达到45%，Keera微调（97.5M参数）为5.5%。
1
来源数
50%
置信度
长期有效
时效性
2026/10/18
首次发现
来源
涉及实体
相关事实
待验证在HumanEval上，Keera预训练模型pass@1为3/164（1.8%），微调后为9/164（5.5%）。74% 相似待验证Strife Technologies 旗下 trifero.ai 实验室训练的一个 360M 参数代码模型，在 HumanEval 上最初报告 26.8% 的 pass@1，在去除与基准测试重叠的指令数据后，真实数字为 22.6%。69% 相似待验证初版 Codex 采用约120亿参数规模，在 HumanEval 基准测试中达到 28.8% 的 pass@1 通过率66% 相似待验证初代Codex在HumanEval基准测试上的pass@1指标达到28.8%，而直接使用GPT-3仅为0%65% 相似待验证表现最好的模型在 pass@3 上达到 38.7%，但在 pass^3 上只有 5.9%63% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1057721API
curl https://kongchang.com/api/v1/knowledge/claims/1057721MCP
get_claim(id=1057721)