潜在扩散逆解算的文本正则化

💡 原文中文,约300字,阅读约需1分钟。
📝

内容提要

本文提出了一种使用文本到图像潜在扩散模型的新方法来解决图像逆问题。该方法通过动态优化文本嵌入和投影方法生成更符合扩散先验的图像,在超分辨率、去模糊和修复缺失部分等任务上优于其他求解器。

🎯

关键要点

  • 提出了一种使用文本到图像潜在扩散模型的新方法来解决图像逆问题。
  • 引入了动态优化文本嵌入的 prompt 调整方法,以生成更符合扩散先验的图像。
  • 提出了一种投影方法,保持潜在变量在编码器的范围空间内演化,减少图像伪影问题。
  • 综合方法 P2L 在超分辨率、去模糊和修复缺失部分等任务上优于其他求解器。
➡️

继续阅读