本文全面综述了基于事件相机的3D重建技术,分析了不同输入方式和重建方法的现有成果,指出了数据可用性、评估和动态场景处理的局限性,并展望了未来的发展方向。
EvAnimate框架利用事件相机的高时间分辨率数据,解决了传统视频在时间分辨率和运动模糊方面的问题。该框架能够将静态人像转换为动态视频,显著提高视频质量和时间一致性,尤其在传统方法表现不足时展现出优越性能。
本研究提出ERetinex方法,将Retinex理论与事件相机结合,解决传统相机在低光环境下捕捉信息不足的问题。该方法显著提高了低光图像的清晰度和细节,尤其在极端照明条件下表现优越。
本文提出了一种基于卷积神经网络的方法,从事件相机生成的事件流中估计密集深度。通过合成事件焦平面堆栈训练网络,显著提升了对不同场景的适应能力,结果表明该方法优于失焦深度方法。
本研究提出了FlexEvent框架,克服了现有事件相机在固定频率下物体检测的局限性,实现了在任意频率下的高效检测,提升了动态环境中的准确性,并设立了新的基准。
本文介绍了一种新型结构光系统,能够以每秒一千帧的速度捕捉全帧深度,速度是现有技术的四倍。其关键创新在于设计了一种声光扫描设备,以每秒两百万个光平面的速度进行扫描,结合事件相机显著提高了深度三角测量的效率。
本研究提出了一种新方法,将事件相机的模拟电路特性纳入视频帧到事件的转换中,提升了合成事件数据在高对比度场景下的可靠性,从而增强了深度神经网络处理真实事件数据的泛化能力。
本文提出了AsynEIO模型,旨在融合异步事件相机与惯性传感器以提高运动估计的精度。该模型基于高斯过程回归,结合事件驱动前端和惯性因子,实现高效的运动轨迹追踪与优化。实验结果表明,AsynEIO在高速度和低光照条件下表现优于现有方法,具有实际应用价值。
香港大学的CUBE框架实现了基于事件相机的可控视频生成,无需训练,提升了视频的创意和质量。CUBE通过提取动态边缘信息并结合文字描述生成视频,表现优于传统方法,适用于多种领域,未来将探索更多应用。
该研究提出了SpikMamba框架,结合脉冲神经网络与Mamba建模能力,通过事件相机捕获稀疏数据,显著提升人类动作识别性能。
本研究提出了一种名为IncEventGS的算法,用于增量式三维高斯点云重建,解决事件相机在三维场景中的应用不足。该算法结合传统SLAM方法,实现三维场景和相机运动的联合优化,无需真实相机姿态。实验结果表明,其性能优于现有NeRF方法,具有在事件相机视觉里程计中的潜在应用价值。
研究提出了一种新方法,利用傅里叶变换解决现有算法无法充分利用事件相机数据的问题。该方法在处理企鹅行为数据时表现优异,参数量小,提供了事件驱动处理的新视角。
本文综述了事件相机的vSLAM算法,介绍了事件数据的表示方法,并将vSLAM方法分为四类:特征法、直接法、运动补偿和深度学习。文章详细讨论了每种方法的表现,并指出了当前的挑战和未来机遇。
本研究提出了一种去模糊电子神经辐射场(Deblur e-NeRF)的方法,解决事件相机在高速运动或低光照下的模糊问题。通过像素带宽模型和阈值归一化全变差损失,优化纹理缺失区域,实现低模糊NeRF的重建。实验验证了该方法的有效性。
论文将不可见物体视为伪遮挡物体,通过可视属性和自动标注算法处理事件相机数据集,利用跟踪策略保持伪遮挡物体的永久性和边界框。引入时空特征聚合模块和一致性损失增强稳健性。实验表明,额外的可见性标签有助于监督训练,方法在绝对 mAP 上提升了7.9%。
本研究提出一种递归卷积神经网络,解决事件相机在重建高动态范围视频时的伪影和帧率不足问题。通过关键帧引导减少误差,并开发新光学系统收集高速HDR视频和事件流数据。实验表明,该方法生成高质量HDR视频,并在跨相机重建和计算机视觉任务中展现潜力。
Event3DGS是一种利用事件相机的高时间分辨率和显式的基于点的表示来重建高保真度的3D结构的方法。通过稀疏感知的采样和渐进训练方法,可以获得更好的重建质量和一致性。实验证明,Event3DGS具有卓越的渲染质量,并且训练时间减少了95%以上,并且在渲染速度上具有数量级的提升。
本文介绍了使用事件相机实现实时视觉里程计的解决方案,利用事件相机的优势在高速和大动态范围场景下进行实时运行。已在公开数据集和作者的数据集上进行了测试。
本文介绍了基于事件相机的快速线性和连续时间非线性求解器,用于从视觉数据中恢复相机运动和场景几何。研究表明这些方法在准确性和效率方面具有优势,并展示了连续时间非线性求解器在适应运动突变方面的能力。
事件相机是一种受生物视网膜启发的动态视觉传感器,具有高动态范围、高时间分辨率和低功耗等特点。研究提出了一种新颖的时间事件立体视觉框架,通过利用先前时间步骤的信息来提高事件立体匹配的性能,并使用视差图来训练立体光流,实现对3D环境的感知。在MVSEC和DSEC数据集上实现了最先进的性能。
完成下面两步后,将自动完成登录并继续当前操作。