骨架先验的双人交互增强
内容提要
本文介绍了一种基于物理模型的2D和3D姿态估计方法,用于推断3D人体运动,显著提升了动作的真实性和准确性。研究还提出了运动重新定位、互动人物运动预测及基于物理的运动校正等新方法,并在多个数据集上取得了优异的实验结果。
关键要点
-
本文介绍了一种基于物理模型的方法,用于从视频中推断3D人体运动,显著提高动作的真实性和准确性。
-
提出了一种运动重新定位方法,利用几何条件循环网络和编码器空间优化策略实现高效的重新定位。
-
研究了互动人物的运动预测,提出了一种新的跨交互关注机制,表现优于单人运动预测的现有方法。
-
介绍了Skeleton2Humanoid系统,通过物理学模拟器提高合成人体骨架运动的物理可行性。
-
提出了一种利用强化学习和物理模拟器实时重定向人类运动的方法,仅需运动捕捉数据进行培训。
-
介绍了一种新型的二人图和两个人图卷积网络(2P-GCN),用于识别人与人交互和个体动作。
-
构建了一个条件GAN框架,利用单个图像生成更真实的动态人体运动序列。
-
通过单眼RGB视频训练具有物理可行性的人体运动生成模型,实现更高质量的运动合成与估计。
-
提出了一种新的方法CATMO,通过学习文本嵌入生成稳定的动作序列。
-
MotioNet是一种深度神经网络,用于从单眼视频中重建3D人体骨骼运动,确保恢复的旋转速度自然。
延伸问答
这项研究的主要方法是什么?
研究提出了一种基于物理模型的方法,通过2D和3D姿态估计推断3D人体运动,显著提高动作的真实性和准确性。
运动重新定位方法的创新点是什么?
运动重新定位方法利用几何条件循环网络和编码器空间优化策略,实现高效的重新定位,防止相互穿透。
如何预测互动人物的运动?
通过收集专业舞蹈者的数据,提出了一种新的跨交互关注机制,能够在短期和长期预测中优于单人运动预测。
Skeleton2Humanoid系统的功能是什么?
Skeleton2Humanoid系统通过物理学模拟器提高合成人体骨架运动的物理可行性,并进行基于物理的运动校正。
如何利用强化学习进行运动重定向?
研究提出了一种利用强化学习和物理模拟器实时重定向人类运动的方法,仅需运动捕捉数据进行培训。
2P-GCN模型的应用是什么?
2P-GCN模型用于识别人与人交互和个体动作,在多个数据集上取得了最先进的结果。