已验证80% 置信事实时间未知

MoE架构最早由Jacobs等人在1991年提出，近年来被Google的Switch Transformer和Mixtral等模型重新带入主流

12

来源数

80%

置信度

长期有效

时效性

2026/6/1

首次发现

来源

GPT-OSS开源模型本地部署教程：实测效果与显存占用分析

bilibiliIT周瑜

涉及实体

MoEconcept Switch Transformermodel Mixtralmodel Googlecompany

相关事实

已验证MoE（混合专家）的核心思想可追溯至1991年Jacobs等人提出的早期混合专家框架，谷歌2021年的Switch Transformer将其推入大规模语言模型时代83% 相似已验证MoE 架构思想最早可追溯至1990年代，在大模型时代由 Google 的 Switch Transformer 重新引爆，并经 Mixtral、GPT-4 等项目验证80% 相似待验证MoE架构最早由Google系统性引入Transformer框架，后被中国头部模型公司发扬光大78% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/23244

API

curl https://kongchang.com/api/v1/knowledge/claims/23244

MCP

get_claim(id=23244)