一种具有极限边缘智能设备学习能力的精确可扩展 RISC-V DNN 处理器

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

本文提出了一种在微控制器上部署低误差深度神经网络的方法,通过混合低位宽压缩和均匀量化,以整数运算建模推理图,摆脱了资源受限的内存和计算限制。使用量化感知的重训练将虚假量化图转换为整数推理模型,并使用ICN图层将该模型部署到只有2MB的FLASH存储器和512kB的RAM设备上。实验结果表明,Top1精度提高了8%,达到了68%。

🎯

关键要点

  • 提出了一种在微控制器上部署低误差深度神经网络的新方法。
  • 方法结合了低位宽压缩和均匀量化,使用整数运算建模推理图。
  • 旨在确定每个激活和权重张量的最小位精度,以克服内存和计算限制。
  • 通过量化感知的重训练,将虚假量化图转换为整数推理模型。
  • 使用整数通道归一化 (ICN) 图层将模型部署到2MB FLASH存储器和512kB RAM设备上。
  • 实验结果显示,Top1精度提高了8%,达到了68%。
➡️

继续阅读