BriefGPT - AI 论文速递 · 2023-10-31T00:00:00Z

EELBERT：通过动态嵌入实现微小模型

📝

内容提要

EELBERT是一种基于transformer模型的压缩方法，成功地显著减小了模型的大小，并在GLUE基准测试中证明了EELBERT与传统BERT模型之间仅有微小的回归差异。

🏷️

标签

EELBERT GLUE基准测试 transformer模型 压缩方法 模型大小