斑点场:用于稀疏3D和4D重建的神经高斯斑点

💡 原文中文,约500字,阅读约需2分钟。
📝

内容提要

Splatter Image是一种超快的单目三维物体重建方法,运行速度每秒38帧。使用高斯颗粒化技术,通过二维图像到图像的网络将输入图像映射到每个像素点上的三维高斯。添加交叉视图注意力可进一步扩展该方法。在标准基准测试中,Splatter Image相比其他方法取得更好结果。

🎯

关键要点

  • Splatter Image是一种超快的单目三维物体重建方法,运行速度达到每秒38帧。

  • 该方法基于高斯颗粒化技术,实现了实时渲染、快速训练和出色的多视角重建扩展性。

  • 首次将高斯颗粒化应用于单目重建领域,使用一个二维图像到图像的网络进行映射。

  • Splatter Image的设计简单,通过将输入图像映射到每个像素点上的三维高斯生成图像。

  • 方法扩展包括使用多个图像作为输入,并添加交叉视图注意力。

  • 渲染器速度达到每秒588帧,训练时只需一个GPU生成整个图像。

  • 在标准基准测试中,Splatter Image在PSNR、LPIPS等度量标准上优于最近和更昂贵的基线方法。

➡️

继续阅读