ReLM:利用语言模型提升化学反应预测

💡 原文中文,约200字,阅读约需1分钟。
📝

内容提要

该研究使用有向异构图和GNN网络扩展神经语言模型,提高模型泛化能力。在WikiText-103数据集上表现优异,最佳困惑度约为14.8。

🎯

关键要点

  • 研究使用有向异构图和GNN网络扩展神经语言模型。
  • 通过建立相关类语境环境节点的有向异构图,提高模型的泛化能力。
  • GNN-LM实现了对参考上下文的直接访问。
  • 在WikiText-103数据集上表现优异,最佳困惑度约为14.8。
➡️

继续阅读