PTEENet: Post-Trained Early-Exit Neural Network Augmentation for Inference Cost Optimization
💡
原文英文,约100词,阅读约需1分钟。
📝
内容提要
本研究提出了PTEENet,通过引入“捷径”优化深度网络的推理计算成本。该方法扩展了BranchyNet和EEnet架构,允许在预训练模型上附加分支,从而提高推理效率,实验结果表明显著降低了计算成本。
🎯
关键要点
- 本研究提出了PTEENet,通过引入“捷径”优化深度网络的推理计算成本。
- 该方法扩展了BranchyNet和EEnet架构,允许在预训练模型上附加分支。
- PTEENet提高了推理效率,并实时控制速度与准确率的平衡。
- 实验结果表明,该方法能显著降低推理计算成本。
➡️