面向零样本基于草图的图像检索的模态感知表示学习

BriefGPT - AI 论文速递 · 2024-01-10T00:00:00Z

本文介绍了一种新颖的零样本学习框架，通过对比文本间接对齐素描和照片，避免了对素描照片成对样本的需求。该方法通过学习明确的形态编码，实现了跨模态内容检索。实验证明该模型在零样本基于素描的图像检索上有效，并可应用于广义和细粒度设置。