SplatFace: 高斯分布面面片重建及其可优化表面

原文约500字,阅读约需1分钟。发表于:

本文提出了一种新颖的高斯状喷洒框架 SplatFace,它用于无需准确的预定义几何形状进行 3D 人脸重建。该方法同时提供高质量的新视角渲染和精确的 3D 网格重建,通过引入通用的 3D 可塑模型(3DMM)来提供表面几何结构,从而使得以有限的图片集合进行人脸重建成为可能。作者提出了一种联合优化策略,通过协同非刚性对准过程来改善高斯函数和可塑性表面。还提出了一种新的距离度量方法,即喷洒 - 表面距离,通过考虑高斯位置和协方差来改善对准。利用表面信息还用于引入世界空间的稠密化过程,从而获得更好的重建质量。实验分析表明,该方法在新视角合成的高斯状喷洒技术和 3D 重建方法中均具有竞争力,能够生成具有高几何精度的 3D 人脸网格。

我们提出了一种名为SplatArmor的新方法,通过在3D高斯函数中将参数化的人体模型“装甲”,从而恢复出详细的、可动画的人体模型。我们的方法将人体表示为一组位于规范空间内的3D高斯函数,通过扩展底层SMPL几何体的蒙皮来定义关节扭曲。我们通过展示实验结果证明了该方法的有效性。

相关推荐 去reddit讨论