吴恩达:LLM大语言模型理解了世界
原文中文,约1600字,阅读约需4分钟。发表于: 。大型语言模型了解世界吗? 作为一名科学家和工程师,我一直避免问人工智能系统是否 "理解 "任何事物。 对于一个系统是否真的理解--而不是看似理解--并没有一个得到广泛认同的科学检验标准,就像我在之前的一封信中讨论过的意识或智商一样,也不存在这样的检验标准。 这使得 "理解 "问题成为哲学问题而非科学问题。...
大型语言模型(LLM)通过训练黑白棋的移动序列建立了复杂的世界模型,证明了它们能够理解世界。它们的隐藏单元激活捕捉到了棋盘位置和合法棋步的表征,表明它们真正建立了世界模型。虽然使用黑白棋进行研究,但相信通过人类文本训练的LLM也能建立世界模型。哲学家对LLM是否理解世界存在争议,但我们生活在一个充满奇迹的时代。