离散时间 ReLU 循环神经网络的稳定性和性能分析

💡 原文中文,约300字,阅读约需1分钟。
📝

内容提要

本文通过维度恒定的非线性神经网络的稳定性和性能,从理论上证明了通过结合李亚普诺夫/耗散理论和重复ReLU满足的二次约束(QCs)导出。作者使用已知的标量ReLU的性质,创作了一般类的重复ReLU的QC。通过示例展示了稳定性/性能条件,并研究了抬升视野的影响。

🎯

关键要点

  • 通过结合李亚普诺夫/耗散理论和重复ReLU导出二次约束(QCs)
  • 使用已知的标量ReLU性质创作一般类的重复ReLU的QC
  • 稳定性和性能条件使用这些QC以及用于ReLU RNN的抬升表示
  • 标量ReLU的正齐性性质不扩展重复ReLU的QC类
  • 通过示例展示稳定性/性能条件,并研究抬升视野的影响
➡️

继续阅读