该文综述葡萄牙语和西班牙语语言模型研究。葡语方面,单语预训练可提升多语模型性能,收益多来自领域知识;Albertina、GlórIA、ELLE及基于LLaMA 2的模型推进了葡语编码与生成。西语方面,跨语言模型常优于单语模型,BART和T5在摘要、改写、生成问答中表现最佳。
完成下面两步后,将自动完成登录并继续当前操作。