多粒度多图关系关联的标准基准 (MMRA)

BriefGPT - AI 论文速递 · 2024-07-24T00:00:00Z

最近的研究发现，大型语言模型和大型多模态模型在医疗应用中具有潜力。研究引入了RJUA-MedDQA基准测试，用于解释医学报告的复杂性和推理能力。通过使用高效的结构恢复注释方法，提高了注释效率并提供了准确率改进。对多个LMMs进行了评估，发现现有的模型性能仍受限制，但LMMs在处理低质量和多样化结构的图像上更加稳健。希望该基准测试能推动多模态医学文档理解领域的研究并促进其在医疗健康领域的应用。