SplitNeRF: 切分总和逼近神经场用于联合几何、照明和材料估计

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

该研究提出了一种新方法,通过估计拍摄图片的几何、材质特性和环境光照来数字化真实世界物体。研究使用了基于图像的光照分数和逼近方法,并利用高效蒙特卡洛采样的正则化器来建模预集成光照。实验结果表明,该方法在估计场景的几何、材质特性和光照方面效果显著。

🎯

关键要点

  • 该研究提出了一种新方法,通过估计拍摄图片的几何、材质特性和环境光照来数字化真实世界物体。
  • 方法结合了基于图像的光照分数和逼近方法,纳入到神经辐射场(NeRF)管道中。
  • 使用单个场景特定的MLP模型来建模场景的光照,表示任意分辨率的预集成图像光照。
  • 通过高效蒙特卡洛采样的新型正则化器实现对预集成光照的准确建模。
  • 提出了一种利用类似蒙特卡洛采样的新型正则化器来监督自遮挡预测的方法。
  • 实验结果表明,该方法在估计场景的几何、材质特性和光照方面效果显著。
  • 该方法在单个NVIDIA A100 GPU上进行约1小时的训练后,能够达到最先进的重光质量。
➡️

继续阅读