DELAN: 视觉与语言导航的双层对齐：跨模态对比学习

BriefGPT - AI 论文速递 · 2024-04-02T00:00:00Z

提出了一种基于因果学习范式的统一框架CausalVLN，通过建立关于视觉和语言的结构因果模型(SCM)的合理假设，并引入视觉和语言门路因果编码器，在训练和验证期间实现无偏特征表达，增强了智能体在不同环境中的泛化能力，并在三个VLN数据集上的实验证明了该方法的优越性和显著缩小了在已知和未知环境之间的性能差距。