无数据收集的遮蔽视频建模
💡
原文中文,约300字,阅读约需1分钟。
📝
内容提要
本研究通过引入伪运动生成器(PMG)模块,解决了视频变换器预训练中的数据收集成本、隐私及偏见问题。实验结果显示,该方法有效增强了时空特征的学习,超越了现有静态图像的方法,并在一定程度上超越了使用真实和合成视频的方法。
🎯
关键要点
- 本研究引入伪运动生成器(PMG)模块,解决视频变换器预训练中的数据收集成本、隐私及偏见问题。
- PMG模块利用静态图像生成伪运动视频,进行遮蔽视频建模。
- 实验结果表明,该方法有效增强了时空特征的学习。
- 该方法超越了现有静态图像的方法,并在一定程度上超越了使用真实和合成视频的方法。
➡️