神经剪辑:朝着高保真和平滑的fMRI到视频重建
📝
内容提要
本研究针对fMRI到视频重建中的挑战,提出了NeuroClips框架,通过精确解码高层语义和低层感知流,重建高保真和平滑的视频。实验结果显示,该方法在多个指标上显著超越现有模型,实现了高达6秒、8FPS的视频重建,具有重要的应用潜力。
➡️
本研究针对fMRI到视频重建中的挑战,提出了NeuroClips框架,通过精确解码高层语义和低层感知流,重建高保真和平滑的视频。实验结果显示,该方法在多个指标上显著超越现有模型,实现了高达6秒、8FPS的视频重建,具有重要的应用潜力。