大语言模型的推理能力依赖于预训练中的程序性知识,而非简单检索。研究表明,模型在推理时采用通用策略,综合多个文档的信息。这一发现强调了高质量和多样化数据的重要性。
本研究分析了大型语言模型在推理任务中的不足,发现其在简单数学推理中依赖程序性知识而非信息检索,为提升推理能力提供了新思路。
完成下面两步后,将自动完成登录并继续当前操作。