基于 Transformer 模型(BERT,ALBERT 和 RoBERTa)在假新闻检测中的性能分析
💡
原文中文,约300字,阅读约需1分钟。
📝
内容提要
研究者在COVID-19相关主题中进行虚假新闻检测,尝试了支持向量机、随机森林、BERT和RoBERTa等模型。发现预训练转换器和智能设计的随机初始化转换器都能达到较高准确度。
🎯
关键要点
- 研究者在虚假新闻检测方面取得了进展,尤其是在COVID-19相关主题中。
- 现有研究对快速变化的主题和领域特定词汇的虚假新闻重视不足。
- 本文提出了三项与COVID-19相关的虚假新闻检测任务的方法和结果。
- 试验了多种基于文本的模型,包括支持向量机、随机森林、BERT和RoBERTa。
- 预训练转换器产生最佳验证结果,智能设计的随机初始化转换器也能接近其准确度。
➡️