基于移动设备的实时视频压缩感知研究
内容提要
本文探讨了快照压缩成像(SCI)的重建质量提升方法,提出了一种结合非局部自相似性和秩极小化的交替最小化算法,研究表明该算法在重建质量上显著优于现有技术。此外,开发了PnP-GAP和EfficientSCI等高效算法,以解决计算复杂性和内存限制问题,实验结果显示其性能优越。
关键要点
-
通过构建联合模型,将视频/高光谱帧的非局部自相似性和秩极小化方法与SCI传感过程相结合,提出交替最小化算法。
-
仿真和实测结果表明,提出的算法在重建质量上显著优于现有技术。
-
开发了PnP-GAP算法,相比于PnP-ADMM方法,具有更低的计算工作量。
-
利用PnP框架开发出灵活快速的算法,扩展到彩色SCI系统,实现高质量重建。
-
提出MetaSCI元调制卷积网络,能够快速适应新掩码并扩展到大规模数据。
-
提出EfficientSCI深度学习网络,解决过度模型复杂性和GPU内存限制问题,实验结果显示显著优越。
-
提出深度光学框架优化掩膜和重建网络,解决动态范围和深度学习算法退化的挑战。
-
结合事件相机和视频快照压缩成像技术,提出新颖的混合成像方案,记录编码强度测量和中间事件信号。
-
针对低位量化带来的性能下降问题,提出低位量化框架Q-SCI,显著提升信息提取和传播效果。
延伸问答
什么是快照压缩成像(SCI)?
快照压缩成像(SCI)是一种通过利用信号的高维结构来提高图像重建质量的技术。
交替最小化算法在SCI中的作用是什么?
交替最小化算法结合了非局部自相似性和秩极小化方法,显著提高了SCI的重建质量。
PnP-GAP算法相比于PnP-ADMM有什么优势?
PnP-GAP算法具有更低的计算工作量,能够更高效地处理视频快照SCI的重建问题。
EfficientSCI算法解决了哪些问题?
EfficientSCI算法解决了模型复杂性和GPU内存限制的问题,实验结果显示其性能显著优越。
MetaSCI元调制卷积网络的特点是什么?
MetaSCI能够快速适应新掩码并扩展到大规模数据,展示出优异的重建性能。
低位量化框架Q-SCI如何提升性能?
Q-SCI通过设计高质量的特征提取和视频重建模块,显著提升了低位量化模型的信息提取和传播效果。