本文提出了一种基于上下文感知的层次化注意力机制,以提升神经机器翻译的质量。通过引入文档级上下文和稀疏注意力机制,模型在英德数据集上验证了其有效性。同时,研究探讨了知识图谱与注意机制结合的模型,提升了文本理解和分类的准确性。
该文提出了一种基于上下文感知 NMT 的层次化注意力机制,用于处理整个文档的翻译。该方法使用稀疏注意力机制在文档上选择性地关注相关句子和关键词,并将这些注意力模块产生的文档级上下文表示集成到 Transformer 模型的编码器或解码器中。在英德数据集上的实验进一步验证了该方法的有效性。
完成下面两步后,将自动完成登录并继续当前操作。