待验证50% 置信基准精确时间
在HumanEval上,Keera预训练模型pass@1为3/164(1.8%),微调后为9/164(5.5%)。
1
来源数
50%
置信度
长期有效
时效性
2026/10/18
首次发现
来源
涉及实体
相关事实
待验证在HumanEval pass@1对比中,phi-1-small(350M参数)达到45%,Keera微调(97.5M参数)为5.5%。74% 相似待验证Strife Technologies 旗下 trifero.ai 实验室训练的一个 360M 参数代码模型,在 HumanEval 上最初报告 26.8% 的 pass@1,在去除与基准测试重叠的指令数据后,真实数字为 22.6%。66% 相似待验证LoRA使可训练参数量通常仅为全参微调的0.1%-1%,可在单张RTX 3090/4090(显存24GB)上微调7B乃至13B级别的模型62% 相似待验证模型训练完成后的最终参数量为13,693,824个61% 相似待验证初代Codex在HumanEval基准测试上的pass@1指标达到28.8%,而直接使用GPT-3仅为0%61% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1057719API
curl https://kongchang.com/api/v1/knowledge/claims/1057719MCP
get_claim(id=1057719)