ONCOPILOT:一种可提示的CT基础模型用于实体肿瘤评估

💡 原文中文,约500字,阅读约需2分钟。
📝

内容提要

在医学影像中,传统分割方法处理肿瘤时有局限。提出的双提示模式结合视觉和文本提示,创新模型CAT通过3D裁剪图像生成解剖提示,并改进分割效果。CAT在多个CT数据集上表现优异,特别是在肿瘤分割中,展示了多模式提示的潜力。

🎯

关键要点

  • 传统分割方法在处理肿瘤时存在局限性,特别是在形状、大小和外观的变异方面。
  • 提出了一种双提示模式,结合视觉和文本提示的互补优势来分割器官和肿瘤。
  • 创新模型CAT通过3D裁剪图像生成解剖提示,与文本提示配合使用。
  • CAT模型采用基于查询的设计,提示查询有助于掩模预测的分割查询。
  • 实现了ShareRefiner以协调两种类型的提示,改进分割和提示查询。
  • CAT在10个公共CT数据集上训练,展现出卓越的分割性能。
  • 在内部数据集上的验证显示CAT在多个癌症阶段分割肿瘤的显著能力。
  • 协调多模式提示被验证为解决医学领域复杂场景的有前途的途径。
➡️

继续阅读