精密且容错的模拟神经网络蓝图

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

该研究使用RNS开发了一种基于方法的模拟加速器,可以在只使用6位精度的数据转换器的情况下,实现优于FP32精度的99%以上的DNN推断和高效训练。提出了一种容错数据流,利用冗余RNS纠错码保护计算,以应对模拟加速器中的噪声和误差。

🎯

关键要点

  • 该研究使用残余数系统(RNS)开发了一种基于方法的模拟加速器。
  • 在只使用6位精度的数据转换器的情况下,实现优于FP32精度的99%以上的DNN推断。
  • 传统的模拟核在相同的DNN中需要超过8位的精度才能达到同样的准确性。
  • RNS方法扩展到DNN训练中,可以使用7位整数运算高效训练DNN。
  • 训练结果达到与FP32精度相媲美的准确性。
  • 提出了一种容错数据流,利用冗余RNS纠错码保护计算,以应对噪声和误差。
➡️

继续阅读