大型语言模型是否遭受多方对话的困扰？一种对发言人识别和回应选择进行诊断的方法

本研究解决了在多方对话中评估系统表现的难题，提出了一种方法论流程来研究模型在特定结构属性下的表现。通过对回应选择和发言人识别任务进行分析，发现回应选择更多依赖文本内容，而发言人识别则需要捕捉对话的结构维度。此工作有助于理解大型语言模型在多方对话中的表现缺陷。