Toucan: 基于标记的字符级语言建模

💡 原文中文,约300字,阅读约需1分钟。
📝

内容提要

Toucan是一种改进的字符级模型,通过学习将字符表示组合成标记的方式,提高了字符生成速度,同时保持了语言建模性能。与固定词汇解决方案相比,Toucan导致更多较长的序列以单个项目进行标记。

🏷️

标签

➡️

继续阅读