基于时空多模态标记的 Transformer RGBT 跟踪
💡
原文中文,约300字,阅读约需1分钟。
📝
内容提要
研究人员提出了一种基于可见光和热红外图像融合的目标跟踪方法,通过即时学习将两种模态信息融合,实现了高效且有效的跟踪架构。该方法在保持高运行速度的同时,实现了最先进的性能。
🎯
关键要点
- 研究人员提出了一种基于可见光和热红外图像融合的目标跟踪方法。
- 该方法称为 RGB-T 跟踪,旨在低计算成本下实现两种模态信息的全面融合。
- 即时学习的兴起使得知识可以更好地从视觉大模型转移到下游任务。
- 提出的跟踪架构基于两种模态之间的相互即时学习。
- 设计了一个轻量级的即时学习器,嵌入二维注意机制以低计算成本转移信息。
- 广泛的实验证明该跟踪架构有效且高效,保持高运行速度并实现最先进的性能。
➡️