跨模态转移利用大型预训练模型处理不同模态任务,但模态差距影响效果。论文提出MoNA方法,通过元学习减少模态差异,改善转移。实验显示,MoNA在科学任务中表现优异,尤其在数据稀缺时。研究指出模态语义差异影响转移,MoNA通过两阶段训练优化嵌入器,提高源知识重用,增强目标任务表现。
完成下面两步后,将自动完成登录并继续当前操作。