MMMU是一个新的基准,用于评估多模态模型在大规模跨学科任务上的表现。它包括11500个多模态问题,涵盖六个核心学科和30个学科和183个子领域。MMMU侧重于使用领域特定知识进行高级感知和推理,对14个模型进行了评估,结果显示有改进空间。MMMU将推动构建下一代多模态基础模型。
完成下面两步后,将自动完成登录并继续当前操作。