火山引擎多媒体实验室提出了可实时交互的自由视角视频技术,通过多相机阵列采集光场并使用神经辐射场技术重建三维场景。实验室还搭建了实时交互的直播链路,包括模型压缩编码传输和移动端快速解码渲染。力反馈模组和可交互的单目3D视频技术也得到了研发。这一创新技术将为沉浸式视频技术带来新的变革,成为人们日常生活的一部分。
本文介绍了火山引擎多媒体实验室自研的三维重建技术在智能驾驶系统中的应用,解决了驾驶场景重建技术中的多个难点,包括静态场景重建、动态物体重建和神经辐射场重建技术。同时,文章还介绍了使用神经辐射场技术进行隐式重建的方法,并结合自研动静态分割、影子检测等算法对场景进行处理,实现了高精度的几何重建。
完成下面两步后,将自动完成登录并继续当前操作。