待验证50% 置信事实时间未知
以Google Switch Transformer、Mixtral为代表的MoE模型成功部署后,MoE架构已成为超大规模语言模型的主流技术选择
1
来源数
50%
置信度
中期 (~90 天)
时效性
2026/7/2
首次发现
有效期至:2026/9/30
来源
相关事实
已验证MoE在大语言模型时代被Google的Switch Transformer(2021年)和GLaM重新激活81% 相似已验证2017年Google提出的Transformer架构奠定了大语言模型的基础79% 相似待验证MoE架构最早由Google系统性引入Transformer框架,后被中国头部模型公司发扬光大77% 相似已验证Google的Switch Transformer和Mistral的Mixtral 8x7B是MoE架构的典型代表75% 相似已验证MoE(混合专家)的核心思想可追溯至1991年Jacobs等人提出的早期混合专家框架,谷歌2021年的Switch Transformer将其推入大规模语言模型时代75% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/55783API
curl https://kongchang.com/api/v1/knowledge/claims/55783MCP
get_claim(id=55783)