位流损坏的视频恢复:一个新的基准数据集和方法

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

该文介绍了一个新的、具有挑战性的多任务基准——StoryBench,用于评估文本到视频模型。该基准包括三个逐渐增加难度的视频生成任务,并为人工评估视频故事建立了指南。强调了对于视频生成而言更好的自动度量指标的需求,该基准旨在鼓励未来在这个令人兴奋的新领域中的研究。

🎯

关键要点

  • StoryBench是一个新的多任务基准,用于评估文本到视频模型。
  • 基准包括三个逐渐增加难度的视频生成任务:动作执行、故事延续和故事生成。
  • 通过人工注释填补了现有数据集中仅包含单个标题的视频数据集的不足。
  • 评估了一些小而强大的文本到视频基线,并展示了训练的好处。
  • 为人工评估视频故事建立了指南,强调了更好的自动度量指标的需求。
  • StoryBench旨在鼓励未来在文本到视频生成领域的研究。
➡️

继续阅读