本研究揭示了多语种预训练语言模型中事实知识存储的机制,并提出了架构适应性多语种集成梯度方法,定位知识神经元更准确。发现了存储跨语言事实知识的语言无关知识神经元和退化知识神经元,为多语种预训练语言模型中事实知识存储的机制提供了宝贵的见解。
完成下面两步后,将自动完成登录并继续当前操作。