DesignProbe: 多模式大语言模型的平面设计基准

原文约400字，阅读约需1分钟。发表于：。

多模式大型语言模型 (MLLMs) 在设计方面的能力是 DesignProbe 基准测试旨在研究的重点。通过对两个级别的设计元素和整体设计进行八个任务的测试，我们发现改进提示可以提高 MLLMs 的性能，并且添加图像比添加文本更能提升性能。

多模式大型语言模型在预测推理方面的能力尚未得到充分探索。研究者引入了一个新的基准测试，评估这些模型在不同情境下的预测推理能力。经过实验证实，这个基准测试可以揭示当前流行的多模式大型语言模型在预测推理任务中的优缺点。这个基准测试为多模式大型语言模型提供了一个标准化的评估框架，并促进了更先进的模型的发展。