LLäMmlein: Building Compact and Competitive German Language Models from Scratch

💡 原文英文,约100词,阅读约需1分钟。
📝

内容提要

本研究开发了两款德语解码模型LLäMmlein 120M和1B,填补了德语自然语言处理的空白。通过创新的数据预处理和定制分词器,模型在SuperGLEBer基准测试中表现优异,为未来的开发提供了参考。

🏷️

标签

➡️

继续阅读