通过手法控制世界

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

InterHandGen是一个学习两只手相互作用生成先验的新框架,可以产生合理且多样化的双手形状。该框架通过对事实单独实例分布的无条件建模和条件建模来建模联合分布。该框架的扩散模型通过条件丢弃来学习单手分布的无条件和有条件性。该框架的方法明显优于基准生成模型,可提高从野外单目图像中重建两只手的性能,达到新的最高准确度。

🎯

关键要点

  • InterHandGen是一个学习两只手相互作用生成先验的新框架。
  • 该框架可以产生合理且多样化的双手形状,适用于与或没有对象的近距离交互。
  • 先验可以整合到任何优化或学习方法中,以减少不适定设置中的歧义。
  • 联合分布的建模被分解为对单独实例分布的无条件建模和条件建模,以降低学习复杂度。
  • 引入的扩散模型通过条件丢弃学习单手分布的无条件和有条件性。
  • 在抽样方面,结合了防穿透和无分类器指导,以实现合理的生成。
  • 建立了严格的两只手合成评估协议,显示出方法在可信度和多样性方面优于基准生成模型。
  • 扩散先验提高了从野外单目图像中重建两只手的性能,达到了新的最高准确度。
➡️

继续阅读