PetKaz 参与 SemEval-2024 任务 3:利用 LLM 在对话中提取情绪 - 原因对进行情绪分类的创新

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

本论文介绍了为SemEval-2024任务3开发的多模态情绪原因分析系统,通过集成文本、音频和视频等多种模态,有效捕捉人际对话中的情绪。系统采用两种不同的方法,获得第四名,并证明提出的解决方案有显著性能提升。实验代码可在GitHub上找到。

🎯

关键要点

  • 本论文介绍了为SemEval-2024任务3开发的多模态情绪原因分析系统。
  • 系统通过集成文本、音频和视频等多种模态有效捕捉人际对话中的情绪。
  • 开发高效的多模态情绪原因分析系统面临多样模态的复杂性挑战。
  • 系统采用两步骤框架,使用两种不同的方法进行情绪和原因预测。
  • 方法1使用了两个独立的Llama 2模型进行指令微调。
  • 方法2使用GPT-4V描述基于对话的视频,并使用GPT 3.5进行上下文学习。
  • 系统在比赛中获得了第四名,且消融实验证明了显著的性能提升。
  • 所有实验代码可在GitHub上找到。
➡️

继续阅读