多模态对话中情感和意图的联合理解：一个基准数据集

BriefGPT - AI 论文速递 · 2024-07-03T00:00:00Z

本文介绍了MC-EIU技术，用于解码多模态对话历史中的语义信息和推断当前话语的情感和意图。作者还提出了MC-EIU数据集，包括7个情感类别、9个意图类别、3种模态和两种语言。作者使用EI$^2$网络作为参考系统，通过模拟多模态对话中情感和意图之间的深层关联来实现。实验证明EI$^2$方法在MC-EIU数据集上的有效性。