BriefGPT - AI 论文速递 · 2023-08-31T00:00:00Z 从非流式 ASR 编码器到流式 ASR 编码器的知识蒸馏，使用辅助非流式层 💡 原文英文，约100词，阅读约需1分钟。 📝 内容提要 本文介绍了KD-NAS模型，使用神经架构搜索（NAS）寻找最佳学生模型进行知识蒸馏。该模型能够检索与自然语言任务相关的候选架构，并在下游任务培训集上提取架构，性能提升了15％（GPU）和20％（CPU）。 🏷️ 标签 KD-NAS模型 性能提升 知识蒸馏 神经架构搜索 编码器 自然语言任务 阅读原文 生成长图 分享链接 已复制链接
