探索神经坍塌时的泛化行为

💡 原文中文,约200字,阅读约需1分钟。
📝

内容提要

本文研究了深度神经网络训练中的神经崩溃现象,发现神经崩溃解决方案是唯一的全局极小值。作者还研究了调整超参数来改善优化景观的可能性,并在实际网络框架上验证了理论发现。

🏷️

标签

➡️

继续阅读