在 120B-A12B 模型中，模型权重总量为 1200 亿参数，但每个 token 前向时只有约 120 亿参数实际参与运算。