Unverified60% confidenceFactTime unknown
百度发布文心大模型5.1，其预训练成本降至业界同规模模型的约6%
2
Sources
60%
Confidence
Medium-term (~90 days)
Relevance
6/1/2026
First Seen
Valid until: 8/30/2026
Sources
AI编码工具性能优化与多模态智能体最新进展盘点
bilibili硅基考古队
Related Entities
Related Claims
Unverified对LLaMA-7B所有注意力层应用r=8的LoRA，可训练参数量从70亿降至约400万，压缩比超过1750倍67% similarVerified对于一个 70 亿参数的模型，LoRA 通常只需训练不到 1% 的参数量，显存需求可降低 60% 以上64% similarUnverified由LMSys团队提出的RouteLLM通过训练路由模型在强弱模型间分配，可在保持95%以上质量的情况下将成本降低40-60%64% similarUnverifiedMoE架构每次推理仅激活少数专家，训练成本相对同等能力稠密模型大幅降低，10B激活1B相比10B稠密模型训练成本低10倍且推理更快62% similarUnverifiedAI将内容生产的边际成本降至接近零，一旦模型训练完成，生成第一万篇文章的成本与第一篇几乎相同62% similar
Cite This Claim
Stable URI
https://kongchang.com/claim/16362API
curl https://kongchang.com/api/v1/knowledge/claims/16362MCP
get_claim(id=16362)