GaussianOcc:基于高斯喷洒的完全自监督高效3D占用估计

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

我们提出了一种名为MVSplat的高效前馈3D高斯分割模型,通过稀疏多视图图像进行学习。该模型在光度监督下学习高斯原始图的透明度、协方差和球面谐波系数。实验结果表明,该模型在RealEstate10K和ACID基准测试中具有最快的前馈推断速度和更好的性能。与pixelSplat相比,该模型参数更少,推断速度更快,同时具有更高的外观和几何质量以及更好的跨数据集泛化能力。

🎯

关键要点

  • 提出了一种名为MVSplat的高效前馈3D高斯分割模型。

  • 模型通过稀疏多视图图像进行学习。

  • 建立成本体积表示以准确定位高斯中心,提供深度估计的几何线索。

  • 模型在光度监督下学习高斯原始图的透明度、协方差和球面谐波系数。

  • 实验表明成本体积表示在学习前馈高斯分割模型中的重要性。

  • 在RealEstate10K和ACID基准测试中,模型实现了最快的前馈推断速度(22帧/秒)和最先进的性能。

  • 与pixelSplat相比,MVSplat模型参数数量少10倍,推断速度快2倍,外观和几何质量更高,跨数据集泛化能力更好。

➡️

继续阅读