Gradpaint: 基于梯度引导的扩散模型修复

💡 原文中文,约200字,阅读约需1分钟。
📝

内容提要

本文提出了一种基于扩散模型的统一条件框架,结合了轻量级 UNet 和固有的差异模型来增强图像恢复的物理约束,并采用基本和集成模块实现了对所有块的引导和其他辅助条件信息的整合。同时,提出了简单而有效的截距补丁分裂策略,用于低光量去噪、去模糊和 JPEG 图像恢复的挑战任务中,取得了显著的感知质量提升和恢复任务的推广。

🎯

关键要点

  • 提出了一种基于扩散模型的统一条件框架。
  • 结合了轻量级 UNet 和固有的差异模型以增强图像恢复的物理约束。
  • 采用基本和集成模块实现对所有块的引导和其他辅助条件信息的整合。
  • 提出了简单而有效的截距补丁分裂策略。
  • 该策略用于低光量去噪、去模糊和 JPEG 图像恢复的挑战任务中。
  • 取得了显著的感知质量提升和恢复任务的推广。
➡️

继续阅读