阿里巴巴与中国人民大学、上海交通大学联合推出WritingBench评估基准,涵盖六大领域和100个细分场景,旨在全面评估大模型的写作能力。该基准克服了现有评估的局限性,采用动态评估体系,提高了人类一致性得分。研究表明,思维链技术在创意写作中表现优异,但在效率型写作上效果有限。
本研究通过自我一致性和思维链技术,提升了云端大型语言模型在数学推理中的准确性。提出的MathGenie和MathScaleQA方法,通过生成高质量的数学问题和数据集,显著提高了模型性能,解决了结构化数据处理的困难,并为后续开源研究提供了重要资源。
完成下面两步后,将自动完成登录并继续当前操作。