基于多模态协作变压器和混合特征重建的强鲁棒情感识别

本文讨论了缺失情感识别对话（ERC）任务中的问题，并提出了一种基于缺失模态的鲁棒情感识别框架（M2R2）。该框架通过学习通用表示进行迭代数据增强来训练情感识别模型，并采用Party Attentive Network（PANet）来解决情感识别中的缺失问题。实验证明该方法比基线更有效，适用于不同数据集的缺失模态情感识别。