ONCOPILOT:一种可提示的CT基础模型用于实体肿瘤评估
💡
原文中文,约500字,阅读约需2分钟。
📝
内容提要
在医学影像中,传统分割方法处理肿瘤时有局限。提出的双提示模式结合视觉和文本提示,创新模型CAT通过3D裁剪图像生成解剖提示,并改进分割效果。CAT在多个CT数据集上表现优异,特别是在肿瘤分割中,展示了多模式提示的潜力。
🎯
关键要点
- 传统分割方法在处理肿瘤时存在局限性,特别是在形状、大小和外观的变异方面。
- 提出了一种双提示模式,结合视觉和文本提示的互补优势来分割器官和肿瘤。
- 创新模型CAT通过3D裁剪图像生成解剖提示,与文本提示配合使用。
- CAT模型采用基于查询的设计,提示查询有助于掩模预测的分割查询。
- 实现了ShareRefiner以协调两种类型的提示,改进分割和提示查询。
- CAT在10个公共CT数据集上训练,展现出卓越的分割性能。
- 在内部数据集上的验证显示CAT在多个癌症阶段分割肿瘤的显著能力。
- 协调多模式提示被验证为解决医学领域复杂场景的有前途的途径。
➡️