TransAxx: 高效逼近计算的 Transformer
💡
原文中文,约300字,阅读约需1分钟。
📝
内容提要
本研究使用Vision Transformer模型结合近似计算方法分析了低功耗设备上Transformer模型的计算要求和性能折衷,提出了使用蒙特卡洛树搜索算法生成Vision Transformer模型的近似加速器的方法,实现了显著的功耗优化。
🎯
关键要点
- 本研究使用 Vision Transformer 模型结合近似计算方法。
- 分析了在低功耗设备上实现 Transformer 模型的计算要求和性能折衷。
- 提出了使用蒙特卡洛树搜索算法生成 Vision Transformer 模型的近似加速器的方法。
- 实现了显著的功耗优化而不损失性能。
➡️