该文章介绍了一种新的预训练方法Code-Switching Pre-training（CSP），通过跨语言对齐信息预先训练神经机器翻译模型。该方法通过词嵌入映射词典识别源语言和目标语言之间的单词替换，克服了传统模型的缺点。实验证明该方法在无监督和有监督的机器翻译任务上都有显著提高。