DIVKNOWQA: 通过知识库和文本进行开放领域问答评估 LLM 的推理能力
原文中文，约500字，阅读约需2分钟。发表于：。大型语言模型在生成能力方面表现出色，但当仅依赖其内部知识时，容易出现幻觉，尤其是在回答需要不太常见的信息的问题时。基于检索的大型语言模型已经成为将其与外部知识结合的潜在解决方案，然而，最近的方法主要强调从非结构化文本语料库进行检索，忽视了底层结构。此外，当前领域存在一个显著的差距，即缺乏对异构知识源（如知识库和文本）上的大型语言模型进行有效定位的实际基准数据集。为了填补这一空白，我们精心策划...
该文介绍了一个新的数据集，用于评估大型语言模型在异构知识源上的检索能力。作者提出了一种新颖的方法，利用多个检索工具来解决挑战，并展示了该方法在解决推理挑战方面的优越性。
