EndoSparse: 内窥镜场景的实时稀疏视图合成利用 高斯散点技术

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

通过3D高斯喷洒方法,开发了一种无需相机姿态的稀疏视图合成的新构建和优化方法。使用单目深度和将像素投影回3D世界逐步构建解决方案,并通过检测训练视图与对应的渲染图像之间的2D对应关系,开发了一种统一可微的管道来完成相机注册和相机姿态与深度的调整。在数据集上展示了结果,显示出明显优于竞争方法的质量。

🎯

关键要点

  • 开发了一种无需相机姿态的稀疏视图合成的新构建和优化方法。

  • 通过单目深度和将像素投影回3D世界逐步构建解决方案。

  • 开发了一种统一可微的管道来完成相机注册和相机姿态与深度的调整。

  • 引入了高斯喷洒中预期表面的新概念,对优化至关重要。

  • 在Tanks和Temples以及Static Hikes数据集上展示了结果,显示出明显优于竞争方法的质量。

  • 结果在使用一半数据集时,随着视图数量的增加而改善。

  • 使用InstantNGP和高斯喷洒算法时超过了先前的方法。

➡️

继续阅读