CoRF:使用知识蒸馏进行颜色化辐射场
原文中文,约500字,阅读约需2分钟。发表于: 。基于神经辐射场(Neural Radiance Field,NeRF)的方法可以对多视角图像进行高质量的新视角合成。本研究提出了一种从输入的灰度多视角图像中合成着色的新视角的方法。通过将基于图像或视频的着色方法应用于生成的灰度新视角,我们发现由于视角不一致性而引起了伪影。通过在着色灰度图像序列上训练辐射场网络也无法解决 3D...
该研究提出了一种基于神经辐射场的方法,可以对多视角图像进行高质量的新视角合成。通过将基于图像或视频的着色方法应用于生成的灰度新视角,发现由于视角不一致性而引起了伪影。该研究提出了一种基于蒸馏的方法,将自然图像上训练的着色网络中的颜色知识转移到辐射场网络中,从而解决了3D一致性问题。实验结果表明,该方法在室内和室外场景下产生了优秀的着色新视角,并保持着视角间的一致性。同时,该方法还在基于红外多视角图像和旧的灰度多视角图像序列的辐射场网络着色等应用中表现出有效性。