交互式视频:以用户为中心的可控视频生成与多模态协同指导

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

InteractiveVideo是一个以用户为中心的视频生成框架,通过各种直观的机制指导生成模型,促进用户输入和生成过程的合作和响应交互。用户可以定制视频的关键方面,满足需求。

🎯

关键要点

  • InteractiveVideo是一个以用户为中心的视频生成框架。
  • 该框架通过动态交互允许用户在生成过程中指导生成模型。
  • 用户可以使用文本、图片提示、绘画、拖放等直观机制进行交互。
  • 提出了一种协同多模态指导机制,旨在无缝集成用户的多模态指令。
  • 促进用户输入和生成过程之间的合作和响应交互。
  • 用户可以详细定制视频的关键方面,如绘制参考图像、编辑语义和调整视频动作。
  • 提供代码、模型和演示的链接以供使用。
➡️

继续阅读