待验证50% 置信事实精确时间
Google于2021年发布的Switch Transformer论文首次证明MoE可将训练效率提升4倍以上
1
来源数
50%
置信度
长期有效
时效性
2026/7/11
首次发现
来源
Cursor集成Grok 4.5实测:速度快5倍、输出更简洁的AI编程助手
redditr/cursor2026/7/9
相关事实
待验证MoE现代形态可追溯至Google 2017年论文,2022年Google的Switch Transformer证明万亿参数稀疏模型可高效训练81% 相似待验证Google于2022年发布的Switch Transformer证明MoE架构在相同计算预算下收敛速度可达稠密模型的4-7倍80% 相似待验证MoE混合专家架构最早可追溯至1991年的学术论文,谷歌于2021年发布Switch Transformer将专家数量扩展至2048个75% 相似已验证MoE架构由Shazeer等人于2017年在论文《Outrageously Large Neural Networks》中提出,随后由Google在Switch Transformer(2021年)中大规模验证72% 相似已验证谷歌2021年发布的Switch Transformer通过将路由简化为Top-1选择并引入专家容量机制缓解负载不均衡问题71% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/483356API
curl https://kongchang.com/api/v1/knowledge/claims/483356MCP
get_claim(id=483356)