隐式视频表示的快速编码和解码 | ECCV 2024

隐式视频表示的快速编码和解码 | ECCV 2024

💡 原文中文,约1800字,阅读约需5分钟。
📝

内容提要

本文介绍了NeRV-Enc和NeRV-Dec两个组件,显著提升了视频隐式表示的编码和解码速度。NeRV-Enc通过超网络实现104倍加速,NeRV-Dec的解码速度比传统方法快11倍,从而提高了视频处理效率。

🎯

关键要点

  • 视频数据的高维性对研究提出了挑战。
  • 使用神经网络进行视频隐式表示已显示出强大性能,但编码时间仍是挑战。
  • 本文引入NeRV-Enc和NeRV-Dec两个组件以提高编码和解码速度。
  • NeRV-Enc通过超网络实现104倍加速,消除基于梯度的优化。
  • NeRV-Dec的解码速度比传统方法快11倍,且加载速度快2.5倍。
  • NeRV的训练速度较慢且泛化性差,本文提出的方案改善了这一点。
  • 实验使用Vimeo-90K训练集和Kodak、CLIC2020测试集进行验证。
  • 研究结果表明,NeRV-Enc和NeRV-Dec显著提高了视频处理效率。
➡️

继续阅读