【外评】研究发现,52% 的聊天软件编程问题答案是错误的

💡 原文中文,约1100字,阅读约需3分钟。
📝

内容提要

普渡大学的研究发现,52%的ChatGPT生成的编程答案错误且啰嗦,与人类答案不一致。尽管如此,许多人类程序员仍喜欢ChatGPT的答案。研究人员认为,ChatGPT的礼貌语言和全面性使其答案看起来更有说服力,导致人们忽略了错误信息。研究表明ChatGPT存在重大缺陷。

🎯

关键要点

  • 普渡大学研究发现,52%的ChatGPT生成的编程答案是错误的。
  • ChatGPT的答案有77%比人类答案更啰嗦,78%与人类答案存在不一致。
  • 研究分析了517个Stack Overflow问题和2000个ChatGPT答案。
  • 许多人类程序员更喜欢ChatGPT的答案,35%表示喜欢,39%表示不喜欢。
  • 研究指出,ChatGPT的礼貌语言和全面性使其答案看起来更有说服力,导致人们忽略错误信息。
  • 研究表明,ChatGPT仍存在重大缺陷,给程序员带来挑战。
➡️

继续阅读