隐式接触扩散器:基于潜在点云扩散的顺序接触推理
💡
原文中文,约400字,阅读约需1分钟。
📝
内容提要
我们研究了利用模块化设计和双分支扩散模型(HOI-DM)生成逼真的三维人-物互动。互动预测扩散模型(APDM)用于预测接触区域并纠正HOI-DM的错误,从而增强动作多样性。通过BEHAVE数据集训练,实验结果表明该方法能够生成多样化的真实人-物互动。
🎯
关键要点
-
研究通过文本指令生成逼真的三维人-物互动。
-
采用模块化设计,将复杂任务分解为简单子任务。
-
开发双分支扩散模型(HOI-DM)来生成人和物体的动作。
-
通过交叉注意力通信模块促进一致的动作。
-
开发互动预测扩散模型(APDM)来预测人和物体之间的接触区域。
-
APDM能够纠正HOI-DM的潜在错误,并随机生成接触点以多样化动作。
-
将估计的接触点合并到分类器引导中,实现准确的人与物接触。
-
通过注释BEHAVE数据集的文本描述来训练和评估方法。
-
实验结果表明方法能够产生多样化的真实人-物互动。
➡️