上下文缩放与任务缩放在上下文学习中的比较

💡 原文中文,约300字,阅读约需1分钟。
📝

内容提要

研究探讨了变压器在上下文和任务学习中的应用。通过简化架构,表现与GPT-2相当,并结合特征映射与多层感知器,提供了新的实验设置。

🏷️

标签

➡️

继续阅读