GME:通过多模态大型语言模型改善通用多模态检索

📝

内容提要

本研究解决了通用多模态检索(UMR)中训练数据不平衡的问题,提出了一种新的训练数据合成管道以构建高质量的多模态数据集。通过开发通用多模态嵌入器(GME),我们展示了其在UMR任务中的优越性能,实验结果表明该方法在现有技术中达到最先进水平。

🏷️

标签

➡️

继续阅读