Splatt3R:来自非校准图像对的零-shot高斯喷溠
原文中文,约500字,阅读约需2分钟。发表于: 。本研究提出了一种名为Splatt3R的方法,针对从非校准的立体图像对中进行3D重建与新视角合成的挑战,消除了对相机参数和深度信息的依赖。该方法通过优化3D点云几何损失并引入新视角合成目标,从而避免了训练3D高斯喷溅时的局部最小值问题,这一创新显著提高了在自然图像中的泛化能力和性能。研究表明,Splatt3R可以以512 x 512分辨率以4FPS的速度重建场景,并实现实时渲染。
Splatter Image是一种基于高斯颗粒化技术的超快速单目三维物体重建方法,使用神经网络将输入图像映射到每个像素点上的三维高斯,实现实时渲染和快速训练。通过添加交叉视图注意力,可以使用多个图像作为输入。在标准基准测试中,Splatter Image相比其他方法取得了更好的结果。