从多视角图像中学习无符号距离函数与体渲染先验

💡 原文中文,约1500字,阅读约需4分钟。
📝

内容提要

本文介绍了多种神经渲染方法用于3D表面重建,包括NeuralUDF、nEudf和DEUDF等。这些方法通过无符号距离函数和多视图监督,成功重建复杂形状,提升了精度和鲁棒性,尤其在处理开放边界和噪声点云时表现优越。实验结果显示,这些新方法在多项基准测试中超越了现有技术。

🎯

关键要点

  • NeuralUDF 方法通过体绘制从 2D 图像重建任意拓扑表面,成功实现复杂形态的非封闭形状高质量重建。

  • nEudf 方法仅通过多视图监督重建具有任意拓扑结构的表面,在处理开放边界物体时表现卓越。

  • 提出的学习超博定标度无符号距离场的方法提高了开放表面表示的精度和训练性能,能够准确计算法线方向等基本拓扑特性。

  • LoSF-UDF 框架利用局部形状函数学习无符号距离场,增强了对点云中噪声和异常值的鲁棒性。

  • DEUDF 方法通过集成法线对齐和 SIREN 网络捕获细致几何细节,显著提高了 UDF 的准确性和重建曲面质量。

  • 新方法从原始点云直接学习一致性感知无符号距离函数,实验结果显示在表面重建方面优于现有技术。

  • 改进的神经 UDF 学习方法通过集中学习表面边缘提高了对原始 3D 表面的保真度。

  • 通过体积渲染和深度融合先验进行多视角 RGBD 图像学习,解决了几何推断中的不完整深度和遮挡问题。

  • 扩展的 Marching Cubes 算法能够快速准确地将无符号距离场表示的非封闭曲面转换为显式网格。

  • AnchorUDF 方法在单个图像中使用可学习的无符号距离函数表示 3D 服装模型,具有最先进的性能。

延伸问答

NeuralUDF 方法的主要功能是什么?

NeuralUDF 方法通过体绘制从 2D 图像重建任意拓扑表面,成功实现复杂形态的非封闭形状高质量重建。

nEudf 方法在重建开放边界物体时有什么优势?

nEudf 方法仅通过多视图监督重建表面,在处理开放边界物体时表现卓越,超越了已有的多视图表面重建方法。

LoSF-UDF 框架如何增强对点云的鲁棒性?

LoSF-UDF 框架利用局部形状函数学习无符号距离场,增强了对点云中噪声和异常值的鲁棒性。

DEUDF 方法是如何提高 UDF 的准确性的?

DEUDF 方法通过集成法线对齐和 SIREN 网络捕获细致几何细节,显著提高了 UDF 的准确性和重建曲面质量。

如何从原始点云学习一致性感知无符号距离函数?

研究提出了一种新方法,从原始点云直接学习一致性感知无符号距离函数,以进行表面重建,并引入多边形化算法提取表面。

AnchorUDF 方法在 3D 服装建模中有什么应用?

AnchorUDF 方法在单个图像中使用可学习的无符号距离函数表示 3D 服装模型,实现开放服装表面建模和更好的控制拓扑结构。

➡️

继续阅读