由人脑活动生成语言
原文中文,约300字,阅读约需1分钟。发表于: 。通过使用大规模语言模型(LLM)与语义脑解码器相结合,直接从功能性磁共振成像(fMRI)输入中生成与视觉或听觉语言刺激内容紧密相关的连贯语言序列,这证明了利用脑机接口(BCIs)直接生成语言的潜力和可行性。
研究人员使用多模态模型VISION成功预测了人类大脑对自然图像的fMRI扫描反应,准确度超过现有技术45%。这项研究揭示了视觉区域的表征偏差,并提供了可实验检验的假设和可解释的指标,为视觉皮层功能分析的设计和实施提供了可能性。通过计算模型的进化,这项工作表明了揭示对视觉皮层的基本理解,并提供可靠的脑机接口的可行方法。