本文探讨了终点损失的收敛速度改进，提出线性衰减学习率策略可实现$ ext{O}(1/ ext{sqrt}(T))$的收敛速度，优于常数学习率。通过推广核心恒等式，强调学习率调度的重要性，并展示了理论最佳的收敛结果。