TNF: 三支神经融合用于多模态医学数据分类

本文介绍了一种用于分类多模态医学图像和表格数据的三分支神经融合（TNF）方法，并提出了两种解决多模态分类中标签不一致性挑战的解决方案。通过在三个分支中管理图像模态、表格模态和融合数据的混合输出，最终的决策是通过集成方法从三个分支的可能性中得出的。通过广泛的实验验证了 TNF 方法在各种卷积神经网络和基于 Transformer 的架构以及多个数据集上的优越性。