医学摘要中省略的外在评估
💡
原文中文,约300字,阅读约需1分钟。
📝
内容提要
我们提出了一种新的医学摘要遗漏评估基准MED-OMIT,通过模拟每个事实对下游临床任务的影响,将医生-患者对话和生成的摘要分类为一组事实并识别其在摘要中的遗漏。通过评估发现,MED-OMIT比其他度量方法更好地捕捉到了遗漏。
🎯
关键要点
- 提出了一种新的医学摘要遗漏评估基准MED-OMIT。
- MED-OMIT通过模拟每个事实对下游临床任务的影响进行评估。
- 将医生-患者对话和生成的摘要分类为一组事实并识别遗漏。
- 使用基于LLM提示的方法对事实的重要性进行排序。
- 将事实聚类为支持或否认诊断的证据。
- 在公开数据集上评估MED-OMIT,发现其比其他度量方法更好地捕捉遗漏。
➡️