COSMIC: Clique-Oriented Semantic Multi-Space Integration for Robust CLIP Test-Time Adaptation
💡
原文英文,约100词,阅读约需1分钟。
📝
内容提要
本研究提出COSMIC框架,以解决视觉语言模型在新领域测试时的适应性挑战。通过多粒度跨模态语义缓存和图查询机制,显著提高了模型的适应性,实验结果显示在离散分布任务和跨领域生成方面分别提升了15.81%和5.33%。
🎯
关键要点
- COSMIC框架旨在解决视觉语言模型在新领域测试时的适应性挑战。
- 该框架通过多粒度跨模态语义缓存和图查询机制显著提高了模型的适应性。
- 实验结果显示,COSMIC在离散分布任务和跨领域生成方面分别提升了15.81%和5.33%。
- 现有的缓存方法在处理不可靠特征-标签对和单类别信息时存在困难。
➡️