适用于逆问题的激发调整潜在扩散模型
原文中文,约300字,阅读约需1分钟。发表于: 。我们提出了一种使用文本到图像潜在扩散模型作为通用先验来解决图像逆问题的新方法。我们引入了一种 prompt 调整方法,通过在运行反向扩散过程时动态优化文本嵌入,使得我们能够生成更符合扩散先验的图像。此外,我们提出了一种投影方法,以保持潜在变量在编码器的范围空间内的演化,从而有助于减少图像伪影问题。我们的综合方法 P2L...
该文介绍了一种使用文本到图像潜在扩散模型作为通用先验来解决图像逆问题的新方法。通过 prompt 调整方法和投影方法,能够生成更符合扩散先验的图像,并且在超分辨率、去模糊和修复缺失部分等任务上优于基于图像和潜在扩散模型的逆问题求解器。