共 2 篇相关文章
本文解读论文《Exact Tail Laws for Nonlinear SGD with Infinite-Variance Gradients》,分析无限方差梯度下SGD的精确尾部概率、核心理论结果与实验验证,探讨重尾噪声对优化算法的影响及实践启示。
本文解读一项关于联邦变分不等式(Federated Variational Inequalities)的最新研究,探讨如何通过对Local Extra SGD算法的精细化分析,建立更紧的收敛速率,缩小与联邦凸优化之间的理论差距。