多模态仇恨迷因分类中迷因与词汇的映射

💡 原文中文,约300字,阅读约需1分钟。
📝

内容提要

本文研究了多模态出版物中仇恨言论的检测问题,提出了不同的联合文本和视觉信息的模型,并从 Twitter 收集和注释了大规模数据集 MMHS150K。研究发现,尽管图像对于仇恨言论检测任务很有用,但目前的多模态模型无法超越仅分析文本的模型。作者讨论了原因并开放该领域和数据集以进行进一步研究。

🎯

关键要点

  • 研究多模态出版物中仇恨言论的检测问题。
  • 从Twitter收集和注释了大规模数据集MMHS150K。
  • 提出不同的联合文本和视觉信息的模型进行比较。
  • 提供定量和定性结果,分析任务的挑战。
  • 发现多模态模型无法超越仅分析文本的模型。
  • 讨论原因并开放该领域和数据集以进行进一步研究。
➡️

继续阅读