通过神经逆渲染从面部视频生成高质量的网格混合形状

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

本文介绍了一种新颖的混合可微渲染方法,能够从传统手持相机捕捉的多视图图像中高效重构场景的三维几何和反射率。该方法在初始化阶段使用传统的SfM和MVS方法进行大致重建,然后在优化阶段采用混合方法优化几何和反射率。实验证明,该方法在更高效的同时能够产生与最先进方法相似或更高质量的重建结果。

🎯

关键要点

  • 从自然二维图像中恢复物体形状和外观是一个挑战性的逆渲染问题。

  • 本文介绍了一种新颖的混合可微渲染方法,能够高效重构三维几何和反射率。

  • 该方法分为两个阶段:初始化阶段和优化阶段。

  • 初始化阶段使用传统的SfM和MVS方法进行大致重建。

  • 优化阶段采用混合方法优化几何和反射率,先使用近似可微渲染方法优化几何,再使用基于物理的可微渲染方法优化反射率。

  • 混合方法结合了近似方法的效率和基于物理方法的高质量结果。

  • 大量实验证明该方法在效率上更高,同时重建结果质量与最先进方法相似或更高。

➡️

继续阅读