利用 LLM - 回答者进行项目评估:一项心理测量分析
原文中文,约400字,阅读约需1分钟。发表于: 。利用六种不同的 LLMs(GPT-3.5、GPT-4、Llama 2、Llama 3、Gemini-Pro 和 Cohere Command R Plus)和它们的组合,通过采样方法产生具有类似于人类答案的心理测量特性的回答,以探索教育测量的有效性,结果显示,有些 LLMs 在大学代数方面的能力与大学生相当或更高,而 LLM -...
该研究使用六种不同的语言模型(LLMs)通过采样方法产生类似于人类答案的心理测量特性的回答,探索教育测量的有效性。结果显示,某些LLMs在大学代数方面的能力与大学生相当或更高,并且与人类校准的对应物具有很高的相关性。重新采样方法被证明效果最好,提高了Spearman相关性。