BERT 词汇扩展与知识库构建

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

本文介绍了如何训练针对文本文档中关键短语的任务特定语言模型,并提出了新的预训练目标和适用于BART的预训练设置。通过对预训练语言模型进行微调,可以用于命名实体识别、问答、关系抽取、编写摘要等任务。

🏷️

标签

➡️

继续阅读