InterAct: 捕捉和建模日常场景中两人之间逼真、富有表情和互动的活动

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

本文提出了一种解决准确捕捉和表达两个人之间交互行为的方法。作者通过模拟活动并捕捉新数据集InterAct中的运动序列,演示了一种基于扩散模型的音频估计方法。

🎯

关键要点

  • 提出了一种解决两个人之间交互行为捕捉和表达的方法。
  • 模拟两个人的活动,捕捉了一个名为InterAct的新数据集。
  • InterAct数据集包含241个运动序列,展示真实情景中的互动。
  • 数据集中包括两个人的音频、肢体动作和面部表情。
  • 演示了一种基于扩散模型的音频估计方法,直接估计互动动作。
  • 所有数据和代码将在论文接受后供研究使用。
➡️

继续阅读