RemoCap: 动作捕捉的解缠表示学习

本研究提供了首个非标记的方法来实现单目视频中的人类三维运动捕捉，重建关节骨架的运动和中等尺度的非刚性表面形变。通过使用卷积神经网络中的疏2D和3D人体姿势检测，以及基于低维轨迹子空间解决单目重构问题的模式，我们解决了人工能捕捉挑战。此外，我们提出了基于表面几何的细化方法，实现中等规模的非刚性匹配。我们的方法在准确性，鲁棒性和可处理的场景复杂性方面明显优于先前的单目方法。