端到端水下视频增强:数据集与模型
内容提要
本文提出了多种水下图像增强方法,包括基于条件生成对抗网络的实时增强、物理感知双流水下图像增强网络(PA-UIENet)和单图像低光度增强方法(L^2UWE)。研究通过大规模数据集评估算法性能,显著提升水下图像质量,促进目标检测和跟踪任务的效果。
关键要点
-
提出了一种基于条件生成对抗网络的实时水下图像增强方法,利用全局内容、颜色、局部纹理和样式信息评估图像质量。
-
开发了一个海底图像增强基准数据集(UIEB),用于评估现有算法的性能和局限性。
-
介绍了一个新的水下视觉对象跟踪数据集和通用跟踪器增强方法,显著提升了水下图像增强的性能。
-
构建了一个大规模的水下图像数据集(RUIE),并对多种算法进行了实验,评估其在提高图片可视度和校正色调方面的效果。
-
提出了单图像低光度水下图像增强方法(L^2UWE),通过多尺度融合过程生成增强图像,表现优异。
-
开发了物理感知双流水下图像增强网络(PA-UIENet),结合物理学基础的水下图像形成模型和深度学习技术,解决数据不足问题。
-
提出了Deep SESR方法,支持水下机器人进行图像同步增强和超分辨。
-
引入RAUNE-Net网络,利用残差学习和注意机制提高水下图像增强的可靠性和合理性。
-
通过动态更新伪标签和特征恢复模块,显著降低噪声对水下图像增强的影响。
延伸问答
什么是条件生成对抗网络在水下图像增强中的应用?
条件生成对抗网络用于实时水下图像增强,通过全局内容、颜色、局部纹理和样式信息评估图像质量。
UIEB数据集的主要用途是什么?
UIEB数据集用于评估现有水下图像增强算法的性能和局限性,包含950张真实图像。
L^2UWE方法是如何增强水下图像的?
L^2UWE方法通过多尺度融合过程生成增强图像,强调高亮度和局部对比,表现优异。
PA-UIENet网络的创新之处是什么?
PA-UIENet结合物理学基础的水下图像形成模型和深度学习技术,采用半监督学习解决数据不足问题。
Deep SESR方法的主要功能是什么?
Deep SESR方法支持水下机器人进行图像同步增强和超分辨,能够恢复不同空间分辨率的图像。
RAUNE-Net网络如何提高水下图像增强的效果?
RAUNE-Net通过残差学习和注意机制提高了水下图像增强的可靠性和合理性,获得了优异的性能。