ZoDi: 基于扩散的图像转换的零样本领域自适应
💡
原文中文,约400字,阅读约需1分钟。
📝
内容提要
本文提出了一种名为ZoDi的零样本领域自适应方法,通过扩散模型将源图像的领域转移到目标领域,合成目标领域的类似图像,并最大化两个领域图像的特征相似性,学习到具有领域鲁棒性的表示。实验证明ZoDi在图像分割任务中优于现有方法,并比基于CLIP的方法更具通用性。
🎯
关键要点
-
提出了一种名为ZoDi的零样本领域自适应方法。
-
ZoDi基于扩散模型,具有零样本图像转换和模型自适应两个设计特点。
-
通过扩散模型将源图像的领域转移到目标领域,合成目标领域的类似图像。
-
在训练模型时使用源图像和合成图像,最大化两个领域图像的特征相似性。
-
ZoDi在图像分割任务中优于现有方法,具有更强的通用性。
-
ZoDi不依赖于特定的骨干结构或模型,可以通过生成的图像估计模型性能。
-
实现将公开提供。
➡️