缺失模态的视觉识别深度关联提示
💡
原文中文,约200字,阅读约需1分钟。
📝
内容提要
本研究通过提示学习解决多模态模型在缺失模态时的性能下降问题。将缺失模态视为不同输入类型,利用提示优化设计。实验表明,该方法在多种缺失模态情况下表现优异。
🎯
关键要点
- 本研究解决了多模态模型在缺失模态时的性能下降问题。
- 将缺失模态视为不同输入类型,利用提示优化设计。
- 通过引入提示学习来优化提示与输入特征之间的关联性。
- 实验表明该方法在多种缺失模态情况下表现优异。
➡️