医学摘要中省略的外在评估

💡 原文中文,约300字,阅读约需1分钟。
📝

内容提要

我们提出了一种新的医学摘要遗漏评估基准MED-OMIT,通过模拟每个事实对下游临床任务的影响,将医生-患者对话和生成的摘要分类为一组事实并识别其在摘要中的遗漏。通过评估发现,MED-OMIT比其他度量方法更好地捕捉到了遗漏。

🎯

关键要点

  • 提出了一种新的医学摘要遗漏评估基准MED-OMIT。
  • MED-OMIT通过模拟每个事实对下游临床任务的影响进行评估。
  • 将医生-患者对话和生成的摘要分类为一组事实并识别遗漏。
  • 使用基于LLM提示的方法对事实的重要性进行排序。
  • 将事实聚类为支持或否认诊断的证据。
  • 在公开数据集上评估MED-OMIT,发现其比其他度量方法更好地捕捉遗漏。
➡️

继续阅读