NGD几何偏差论文

发表于arXiv的研究论文，系统分析Adam优化器与自然梯度下降之间的几何距离，将Adam更新规则拆解为对角经验Fisher近似，并通过尺度不变度量在多类损失曲面上量化方向偏差