研究表明，传统语言模型在代码生成方面存在困难，通过引入外部上下文信息（如库文档）可以改善效果。创建的CodeRAG-Bench评估基准显示，高质量的上下文能够提升代码生成效果，但在词汇重叠有限的情况下，检索器仍难以获取有用信息。希望该基准能促进检索增强生成方法的发展。