SPARK:自监督个性化实时单目人脸捕捉

💡 原文中文,约300字,阅读约需1分钟。
📝

内容提要

该研究提出了一种实时全身捕捉的方法,可以从彩色图像中估计身体和手部的形状和运动,并生成带有动态3D面部模型的手部和身体。该方法准确捕获面部表情和颜色,并估计统计面部模型的形状、表情、颜色和照明参数。在公共基准测试中,该方法准确性高且速度快,提供了更完整的面部重建。

🎯

关键要点

  • 该研究提出了一种实时全身捕捉的方法。
  • 该方法可以从彩色图像中估计身体和手部的形状和运动。
  • 生成带有动态3D面部模型的手部和身体。
  • 采用新的神经网络架构,高效利用身体和手部之间的相关性。
  • 可以在多个数据集上进行联合训练,无需同时注释所有部分的数据。
  • 实现了更好的泛化能力,准确捕获面部表情和颜色。
  • 估计统计面部模型的形状、表情、颜色和照明参数。
  • 在公共基准测试中,准确性高且速度快,提供更完整的面部重建。
➡️

继续阅读