BriefGPT - AI 论文速递
·
MGI: 基因组和医学影像的多模态对比预训练
💡
原文中文，约300字，阅读约需1分钟。
📝
内容提要
提出了一种多模态变压器模型 (PathOmics)，将病理学和基因组学结合到结直肠相关癌症存活预测中。通过无监督预训练来捕捉吉格像素全幅图像和各种基因组数据之间的固有互动。验证结果表明该方法在TCGA结直肠癌队列上具有竞争力。
🎯
关键要点
- 提出了一种多模态变压器模型 (PathOmics)。
- 该模型结合了病理学和基因组学的洞察力，用于结直肠相关癌症存活预测。
- 通过无监督预训练捕捉吉格像素全幅图像与基因组数据之间的互动。
- 任务特定模型微调可以扩大多模态和单模态数据的适用范围。
- 验证结果显示该方法在TCGA结直肠癌队列上具有竞争力，超越现有研究。
➡️
