本研究提出了QualBench，这是首个针对中文大型语言模型（LLMs）的多领域问答基准，重点在于本地化评估。研究表明，中文LLM在符合资格的知识方面表现优异，为未来的多领域知识增强和垂直领域训练提供了新机遇。

LHMKE是一种全面评估中文大型语言模型知识的基准，包括10,465个问题，涵盖30个学科的75个任务。通过零-shot评估，比较了11个中文大型语言模型在不同学科的性能。验证了GPT-4的自动评分主观预测能力。研究结果表明LHMKE是具有挑战性和先进性的评估标准。

本文介绍了HalluQA基准，用于评估中文大型语言模型中的幻觉现象。研究人员通过构建对抗样本和自动评估方法发现18个模型中有低于50%的非幻觉率。他们还分析了不同类型模型中的幻觉类型和原因，并讨论了应优先考虑哪些类型的幻觉。

为了评估中文大型语言模型（LLMs）的数学推理能力，研究人员提出了FineMath数据集，涵盖小学数学教学的主要概念，划分为17类数学应用问题，以深入分析LLMs的数学推理能力。实验结果显示，中文LLMs的数学推理能力有待提升。该数据集即将公开发布。

该论文介绍了HalluQA基准，用于评估中文大型语言模型中的幻觉现象。HalluQA包含450个对抗性问题，覆盖多个领域，考虑了中国的历史文化和社会现象。实验发现18个模型的非幻觉率低于50%。研究还分析了不同类型模型中主要类型的幻觉及其原因，并讨论了不同类型模型应优先考虑的幻觉类型。

介绍了CORECODE数据集，用于评估中文大型语言模型的常识推理和冲突检测能力。研究使用众包方式收集了76,787个常识知识注释，并通过对话级推理和检测任务验证模型在该数据集上的能力。结果显示现有的开源中文大型语言模型在预测推理内容方面表现不佳。

本文介绍了 HalluQA 基准，用于衡量中文大型语言模型中的幻觉现象。通过对 24 个大型语言模型的广泛实验，发现有 18 个实现了低于 50% 的非幻觉率，表明 HalluQA 具有很高的挑战性。同时，分析了不同类型模型中主要类型的幻觉及其原因，并讨论了不同类型模型应优先考虑哪些类型的幻觉。

该论文建立了一个名为HalluQA的基准，用于衡量中文大型语言模型中的幻觉现象。通过对24个大型语言模型进行广泛实验，发现18个模型实现了低于50%的非幻觉率，表明HalluQA具有很高的挑战性。同时，该论文分析了不同类型模型中主要类型的幻觉及其原因，并讨论了不同类型模型应优先考虑哪些类型的幻觉。

该论文介绍了一个名为HalluQA的中文大型语言模型幻觉现象基准，包含450个对抗性问题，使用GPT-4设计了自动评估方法，对24个大型语言模型进行了广泛实验。结果表明，18个模型实现了低于50%的非幻觉率，说明HalluQA具有很高的挑战性。作者还分析了不同类型模型中主要类型的幻觉及其原因，并讨论了不同类型模型应优先考虑哪些类型的幻觉。