BriefGPT - AI 论文速递 · 2023-09-08T00:00:00Z 移动版 V-MoEs：通过稀疏的专家混合缩小视觉变形器 💡 原文中文，约200字，阅读约需1分钟。 📝 内容提要 该文介绍了一种软的 MoE 方法，可以在训练和推断成本上实现模型容量的扩展，解决了传统的 MoE 方法中存在的多个问题。该方法在视觉识别任务中表现优于标准的 Transformers 和其他 MoE 变种，并且在模型规模扩展上也有良好的性能。 🏷️ 标签 MoE Transformers 模型容量 模型规模扩展 移动 视觉识别 阅读原文 生成长图 分享链接 已复制链接
