传统 TTS 以梅尔谱重建损失或对抗损失训练，优化目标与人类主观听感存在偏差；MOS 类主观指标不可微，适合用可学习的评判器作为代理奖励，通过策略梯度直接优化。