论文摘要内容单位在文本摘要评估中的作用

本研究通过生成语义角色三元组和大型语言模型来近似摘要内容单元（SCUs），探讨了在文本摘要中 SCUs 的使用条件和价值，并发现大型语言模型是实现最佳近似质量的最佳策略。

本文提出了一种新的评估框架，基于LLMs，通过比较生成文本和参考文本来提供全面的评估。该模型模拟生成文本的客观和主观维度，并引入了上下文提示机制以生成动态角色扮演者配置文件。实验结果表明，该模型具有竞争力且与人类注释者一致。