利用最长支持子序列评估忠实度
💡
原文中文,约300字,阅读约需1分钟。
📝
内容提要
本文研究了faithfulness metrics在对话摘要任务中的应用,发现大多数度量方法在对话数据上的表现与人类判断相关性较差。为了提高faithfulness metrics的性能,采用了fine-tuning和unlikelihood training等技术。最后提出了T0-Score度量方法,能够稳定提高评价性能。
🎯
关键要点
-
本文研究了faithfulness metrics在对话摘要任务中的应用。
-
大多数度量方法在对话数据上的表现与人类判断相关性较差。
-
为了提高faithfulness metrics的性能,采用了fine-tuning和unlikelihood training等技术。
-
提出了T0-Score度量方法,能够稳定提高评价性能。
➡️