HandyPriors: 基于可微先验的手 - 物体交互的物理一致感知

HandyPriors提出了一个统一且通用的流水线框架，用于在人-物互动场景中进行姿态估计。它通过渲染先验和物理先验来对齐图像和分割掩码，减轻帧之间的穿透和相对滑动问题。HandyPriors提供了两种手部和物体姿态估计的选择，基于优化的姿态估计可以获得更高的精度，而基于滤波的追踪则更快地使用可微的先验作为动力学和观测模型。HandyPriors在姿态估计任务中获得了可比较或更好的结果，并且可以根据不同可变的物理模块预测接触信息。同时，HandyPriors在机器人手操纵和野外人-物姿态估计等感知任务中也展示了泛化能力。