该文综述梯度下降在非凸优化中的性能保证,重点分析梯度噪声对逃离鞍点、达到二阶稳定点的作用,提出均方方法等替代方案,并讨论随机梯度算法的收敛复杂度、泛化误差与稳定性,为深度学习等应用提供理论支撑。
完成下面两步后,将自动完成登录并继续当前操作。