待验证50% 置信基准精确时间
微软的Phi系列小模型通过精心设计的合成'教科书级'数据进行训练,以不到3B的参数量在多项基准测试中超越了10倍于其规模的模型
1
来源数
50%
置信度
中期 (~90 天)
时效性
2026/9/6
首次发现
有效期至:2026/12/5
来源
涉及实体
相关事实
待验证针对有限意图集合训练的轻量级专用模型参数量通常在10M以下,其推理延迟可比通用LLM调用低2-3个数量级67% 相似待验证MoE架构每次推理仅激活少数专家,训练成本相对同等能力稠密模型大幅降低,10B激活1B相比10B稠密模型训练成本低10倍且推理更快66% 相似待验证扩散模型推理时通过采样器算法通常只需20-30步迭代即可获得高质量图像生成结果,远少于训练时的1000步66% 相似待验证开发团队用分布式拆层方法测试过高达1万亿参数的模型65% 相似待验证M2.5采用混合专家架构(Mixture of Experts,MoE),每次推理只有10B参数真正参与计算,总参数量可能远超10B65% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/866926API
curl https://kongchang.com/api/v1/knowledge/claims/866926MCP
get_claim(id=866926)