忠实、不忠实还是模糊?基于初始立场的多智能体辩论以进行摘要评估

📝

内容提要

本研究解决了基于大语言模型的摘要忠实度评估中,评估者容易被文本流畅性误导、难以识别摘要错误的问题。我们提出了一种新的方法,通过分配初始立场给多个智能体进行多轮辩论,促进更有意义的讨论以识别摘要中的错误,并引入了模糊性这一新维度及详细分类来识别特殊情况。实验结果表明,该方法能够有效识别模糊性,并在非模糊摘要上表现更优秀。

🏷️

标签

➡️

继续阅读