Unverified80% confidenceFactTime unknown
MUON优化器替代了沿用多年的AdamW优化器，通过引入矩阵正交化步骤使训练曲线更加平滑
1
Sources
80%
Confidence
Long-term
Relevance
5/31/2026
First Seen
Sources
DeepSeek V4深度解析：万亿参数开源模型碾压闭源对手
bilibili马士兵学堂
Related Entities
Related Claims
UnverifiedAdamW、LAMB等优化器变体专门针对大批量训练和大模型微调进行优化70% similarVerifiedAdam优化器结合了动量（Momentum）和自适应学习率两大思想，已成为大模型训练的标配70% similarVerifiedAdam优化器于2014年提出，融合动量与自适应学习率，成为当今最广泛使用的优化器67% similarUnverified权重归一化技术将权重向量分解为方向与模长两个独立分量分别优化，可显著改善训练稳定性65% similarUnverifiedAdam、RMSProp等自适应学习率优化器在SGD基础上进一步改进了收敛速度和稳定性64% similar
Cite This Claim
Stable URI
https://kongchang.com/claim/13901API
curl https://kongchang.com/api/v1/knowledge/claims/13901MCP
get_claim(id=13901)