[控场AI]
概念SGDM / SGD with Momentum

随机梯度下降带动量

一种在随机梯度下降中引入动量项的优化算法,通过累积历史梯度的指数加权平均来加速收敛并平滑更新方向,是深度学习训练中最常用的优化器之一。

来源文章