本研究评估了零样本异常检测(ZSAD)在医学影像中的应用,特别是CLIP模型在脑肿瘤检测中的表现。尽管模型展现出潜力,但其精度仍未达到临床需求,需进一步改进。
该方法利用视觉-语言模型CLIP进行零样本异常检测,通过滑动窗口方式对图像部分应用分类,使用文本嵌入训练神经网络提取正常和异常特征,实现无需训练图像的无类别异类检测,取得了最新性能。
本文提出了一种利用视觉-语言模型CLIP进行零样本异常检测的新方法。通过滑动窗口方式对图像的每个部分应用提示引导分类,并通过生成文本嵌入来训练前馈神经网络。通过从CLIP的嵌入中提取正常和异常特征,实现了无需训练图像的无类别异类检测,并取得了零样本设置下的最新性能。
完成下面两步后,将自动完成登录并继续当前操作。