待验证50% 置信事实精确时间
MoE架构最早由Google系统性引入Transformer框架，后被中国头部模型公司发扬光大
1
来源数
50%
置信度
长期有效
时效性
2026/7/22
首次发现
来源
相关事实
已验证MoE架构最早由Jacobs等人在1991年提出，近年来被Google的Switch Transformer和Mixtral等模型重新带入主流78% 相似已验证以Google Switch Transformer、Mixtral为代表的MoE模型成功部署后，MoE架构已成为超大规模语言模型的主流技术选择77% 相似已验证MoE 架构思想最早可追溯至1990年代，在大模型时代由 Google 的 Switch Transformer 重新引爆，并经 Mixtral、GPT-4 等项目验证76% 相似已验证MoE架构由Shazeer等人于2017年在论文《Outrageously Large Neural Networks》中提出，随后由Google在Switch Transformer（2021年）中大规模验证75% 相似待验证MoE现代形态可追溯至Google 2017年论文，2022年Google的Switch Transformer证明万亿参数稀疏模型可高效训练72% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/590224API
curl https://kongchang.com/api/v1/knowledge/claims/590224MCP
get_claim(id=590224)