智能手表和头戴式摄像头的轻量级动作捕捉

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

通过两个智能手表和一个头戴相机,提出了一种轻量级且经济实惠的动作捕捉方法。该方法成本效益更高,便利性更好,能够在不同环境中实现3D全身动作捕捉。通过引入6D头部姿势,克服了传感器输入的稀疏性和模糊性。利用自我中心图像的视觉线索提高动作捕捉质量并减少模糊性。在具有挑战性的场景中展示了该方法的性能。

🎯

关键要点

  • 提出了一种轻量级且经济实惠的动作捕捉方法。
  • 该方法相比于使用六个或更多专业级IMU设备的现有方法更具成本效益和便利性。
  • 能够在不同环境中实现3D全身动作捕捉。
  • 引入了从头戴相机获取的6D头部姿势,以克服传感器输入的稀疏性和模糊性。
  • 提出了一种跟踪和更新楼层变化来定义头部姿势的算法。
  • 引入了多阶段的基于Transformer的回归模块。
  • 利用自我中心图像的视觉线索提高动作捕捉质量并减少模糊性。
  • 在复杂的室外环境和多个个体之间的物体交互和社交互动中展示了方法的性能。
➡️

继续阅读