CMMMU: 一个中国的大型多学科多模态理解基准

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

ArcMMLU是一种专为中文图书馆与信息科学领域定制的基准测试,填补了中文LIS领域LLM评估的空白。研究发现,大多数主流LLM在ArcMMLU上的平均准确率超过50%,但仍存在性能差距,需要改进。ArcMMLU为未来发展铺平了道路。

🏷️

标签

➡️

继续阅读