多模态仇恨迷因分类中迷因与词汇的映射

本文研究了多模态出版物中仇恨言论的检测问题，提出了不同的联合文本和视觉信息的模型，并从 Twitter 收集和注释了大规模数据集 MMHS150K。研究发现，尽管图像对于仇恨言论检测任务很有用，但目前的多模态模型无法超越仅分析文本的模型。作者讨论了原因并开放该领域和数据集以进行进一步研究。