VLA死了,遥操也死了!英伟达机器人一号位说的

VLA死了,遥操也死了!英伟达机器人一号位说的

💡 原文中文,约8300字,阅读约需20分钟。
📝

内容提要

在红杉AI Ascent 2026大会上,Jim Fan宣布VLA和遥操作已不再适用,未来将依赖世界动作模型(WAM)和人类传感器数据。新范式通过模拟物理世界状态和动作微调,结合强化学习,推动机器人技术进步。EgoScale和Dream Zero等新策略将提升机器人在各种任务中的灵活性和自主性,预示着机器人行业的重大变革。

🎯

关键要点

  • 在红杉AI Ascent 2026大会上,Jim Fan宣布VLA和遥操作已不再适用,未来将依赖世界动作模型(WAM)和人类传感器数据。

  • 新范式通过模拟物理世界状态和动作微调,结合强化学习,推动机器人技术进步。

  • EgoScale和Dream Zero等新策略将提升机器人在各种任务中的灵活性和自主性。

  • Jim Fan提出,机器人领域需要新的数据策略,强调人类传感器数据的重要性。

  • Dream Zero模型能够零样本完成新任务,标志着机器人技术的重大变革。

  • 未来,遥操作的占比将逐渐降低,第一视角人类视频将成为机器人的主要数据来源。

🔎

延伸解读

新范式的挑战与机遇

Jim Fan在演讲中提到,VLA和遥操作的淘汰标志着机器人技术的重大转型。新范式依赖于世界动作模型(WAM)和人类传感器数据,这意味着机器人将更加依赖真实世界的数据进行学习和适应。这一转变虽然带来了更高的灵活性和自主性,但也要求开发者在数据采集和模型训练上投入更多精力,确保数据的质量和多样性。

EgoScale的潜力

EgoScale作为一种新型数据策略,强调使用第一视角人类视频进行训练,显示出其在机器人灵巧性任务中的巨大潜力。通过这种方式,机器人能够在没有大量遥操作数据的情况下,快速学习和适应新任务。这一方法不仅提高了训练效率,也为未来机器人在复杂环境中的应用奠定了基础,值得关注其在实际应用中的表现。

遥操作的未来

随着Jim Fan宣布遥操作的逐渐淘汰,行业面临着转型的挑战。虽然遥操作曾是机器人领域的重要组成部分,但其数据采集能力的限制使得其未来发展受到制约。新兴的数据策略如EgoScale和UMI将可能取而代之,推动机器人技术向更高效的方向发展。观察这一转变的过程,将有助于理解未来机器人技术的演变。

延伸问答

Jim Fan在红杉AI Ascent 2026大会上提出了什么新的机器人技术范式?

Jim Fan提出未来将依赖世界动作模型(WAM)和人类传感器数据,取代VLA和遥操作。

Dream Zero模型的主要特点是什么?

Dream Zero能够零样本完成新任务,标志着机器人技术的重大变革。

为什么Jim Fan认为遥操作的占比将逐渐降低?

因为遥操作的数据产能有限,未来将更多依赖第一视角人类视频作为数据来源。

EgoScale策略如何提升机器人的灵活性和自主性?

EgoScale通过使用99.9%的训练数据来自人类第一视角视频,提升机器人在各种任务中的表现。

Jim Fan提到的“物理图灵测试”是什么?

物理图灵测试是指在复杂现实任务中,人类无法仅靠观察判断完成工作的主体是人类还是机器人。

未来机器人技术的主要数据策略是什么?

未来的主要数据策略将是基于第一视角人类视频,结合精细的手部位置追踪和高密度语言标注。

🏷️

标签

➡️

继续阅读