大型语言模型在开放领域的事实查询中常出错。研究者用GPT-4生成了38000个问题的测试集,并提出SAFE方法,将长篇回复分解为单个事实进行多步推理评估。SAFE在16k个事实集上表现优于人类标注者,且成本更低。研究对十三个语言模型进行基准测试,发现较大模型表现更佳。相关资源和代码可在线获取。
正在访问的资源需要验证您是否真人。
或在微信中搜索公众号“小红花技术领袖”并关注
第二步:在公众号对话中发送验证码: