待验证50% 置信事实精确时间
Strata的核心思路是采用MoE(混合专家)架构,模型内部包含两万多个小专家模块,每次推理只调用少数相关专家。
1
来源数
50%
置信度
长期有效
时效性
2026/10/16
首次发现
来源
家用电脑跑1250亿参数大模型?两万五千星Strata本地部署解析
bilibili孤旅逸客2026/10/15
涉及实体
相关事实
待验证V4.1 Flash采用混合专家架构,每一层有1个共享专家和384个路由专家,每个token只激活其中6个路由专家65% 相似待验证混合专家架构通过门控网络(学习型路由器)动态选择最适合当前输入的专家组合,只将计算分发给得分最高的少数专家65% 相似部分验证混合专家(MoE)架构是一种将单个大模型拆分为多个专家子网络的稀疏激活设计,每个专家通常是一组独立的前馈层(FFN)权重,由轻量路由器网络根据输入 token 特征决定分配给哪几个专家。63% 相似待验证实际项目中存在混合方案,用少量专职Agent承担需要并行决策的核心模块,其余功能以Skills形式挂载63% 相似待验证Grok 4的底层架构采用了Mixture of Experts(MoE)混合专家机制62% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1044933API
curl https://kongchang.com/api/v1/knowledge/claims/1044933MCP
get_claim(id=1044933)