基于注意力的语义相关性预测中文句子阅读
原文中文,约400字,阅读约需1分钟。发表于: 。该研究提出了一种具有注意力机制的方法来计算上下文语义相关性,这种方法能更准确地预测眼动数据库中基于汉语阅读任务的定视持续时间,并具有高解释性,有助于深入理解语言理解过程。
该研究提出了一个结合知识图谱和改进的注意机制的模型,解决文本中的语义模糊问题。该模型在字符和词级别上运作,通过集成概念来加深对文本的理解。通过信息增益选择重要词,采用编码器-解码器框架对文本及相关概念进行编码。本地注意机制调整每个概念的权重,减少不相关或噪声概念的影响。改进了本地自注意机制中注意分数的计算公式,确保不同频率出现的词语获得更高的注意分数。采用双向门控循环单元从文本中提取特征,提高分类准确性。在多个数据集上展示了该模型在分类任务中的有效性。