MIT:大模型不只是文字游戏
原文中文,约700字,阅读约需2分钟。发表于: 。这篇来自麻省理工学院的文章揭示了大型语言模型 (LLM) 的一些潜在革命性的东西——它们所做的不仅仅是文字游戏。它们实际上是在自己形成时间和空间的连贯表示。 它揭示了大型语言模型 (LLM) 的潜在革命性特征。这些模型正在形成时间和空间的连贯表示。他们在这些模型中确定了负责理解空间和时间维度的特定“神经元”。 麻省理工学院的 Wes Gurnee 和 Max Tegmark...
大型语言模型具有潜在的革命性特征,能够形成连贯的世界模型并学习空间和时间的线性表示。研究还发现了编码空间和时间坐标的单个神经元,表明现代大模型获得了关于空间和时间的结构化知识。