多模态语义感知自动着色与扩散先验

💡 原文中文,约200字,阅读约需1分钟。
📝

内容提要

本文介绍了一种基于T2I模型的颜色转换模型,该模型利用颜色先验知识和敏感性感知的VQVAE模型生成与灰度图像视觉语义匹配的颜色结果。该模型在感知质量方面达到了最先进的性能。

🎯

关键要点

  • 介绍了一种基于T2I模型的颜色转换模型。
  • 该模型利用预训练的T2I模型的颜色先验知识。
  • 结合扩散引导器产生符合灰度图像视觉语义的潜在色调。
  • 使用灵敏度感知的VQVAE模型生成彩色结果。
  • 在大量实验中,该模型在感知质量上取得了最先进的性能。
➡️

继续阅读