通过原子事实蕴涵度量文本摘要的真实性,针对增强检索生成的指标
最近,大型语言模型在文本摘要方面取得了显著进展。然而,自动生成的摘要存在事实不一致的问题。为了解决这个问题,提出了基于自然语言推理和主张提取的事实性评估摘要度量方法。该方法利用源文件信息和从摘要中提取的主张进行对齐。通过人工注释,将评估扩展到更具挑战性的环境中。
原文中文,约400字,阅读约需1分钟。
最近,大型语言模型在文本摘要方面取得了显著进展。然而,自动生成的摘要存在事实不一致的问题。为了解决这个问题,提出了基于自然语言推理和主张提取的事实性评估摘要度量方法。该方法利用源文件信息和从摘要中提取的主张进行对齐。通过人工注释,将评估扩展到更具挑战性的环境中。