无模板重构人物 - 物体交互与程序交互生成
原文中文,约400字,阅读约需1分钟。发表于: 。通过 ProciGen 和 HDM 方法,本研究提出了一种从单个 RGB 图像中重建人物与物体之间的三维交互的方法,无需使用模板网格,利用 ProciGen 生成的数据集训练 HDM 模型,在重建人物和未见过的物体时取得显著优势。
GenZI是第一个零样本方法,用于生成3D人与场景的交互。通过从大型视觉-语言模型中提取交互先验知识,利用自然语言描述和场景中的粗略点位置,合成场景中的3D人模型的姿态和形状。与传统方法相比,GenZI不需要捕获3D交互数据,使用简单易用的文字提示进行灵活控制。实验证明该方法适用于各种场景类型。