精密且容错的模拟神经网络蓝图
💡
原文中文,约400字,阅读约需1分钟。
📝
内容提要
该研究使用RNS开发了一种基于方法的模拟加速器,可以在只使用6位精度的数据转换器的情况下,实现优于FP32精度的99%以上的DNN推断和高效训练。提出了一种容错数据流,利用冗余RNS纠错码保护计算,以应对模拟加速器中的噪声和误差。
🎯
关键要点
- 该研究使用残余数系统(RNS)开发了一种基于方法的模拟加速器。
- 在只使用6位精度的数据转换器的情况下,实现优于FP32精度的99%以上的DNN推断。
- 传统的模拟核在相同的DNN中需要超过8位的精度才能达到同样的准确性。
- RNS方法扩展到DNN训练中,可以使用7位整数运算高效训练DNN。
- 训练结果达到与FP32精度相媲美的准确性。
- 提出了一种容错数据流,利用冗余RNS纠错码保护计算,以应对噪声和误差。
➡️