用苹果Vision Pro隔空操控机器人，英伟达：「人机合一」也不难嘛
内容提要
英伟达创始人黄仁勋在SIGGRAPH 2024 Keynote演讲中介绍了人形机器人通用基础模型'Project GR00T'的更新，包括远程操控和合成数据生成。英伟达还提供了一套服务、模型和计算平台，加速人形机器人的开发。开发者可以加入NVIDIA人形机器人开发者计划，获得访问权限。
延伸解读
远程操控与合成数据：破解机器人数据瓶颈
人形机器人训练需要大量演示数据，传统远程操控受限于每天24小时和机器人数量，成本高且难以扩展。英伟达的方案是用少量人类演示，通过GPU加速仿真生成千倍以上的合成数据，从而用算力换取数据。这打破了物理世界的限制，让数据收集在比特世界中可扩展。
苹果Vision Pro成为机器人操控新入口
开发者可以使用苹果Vision Pro远程操控人形机器人来捕捉演示数据。这一应用被网友评价为Vision Pro最酷的用例之一。通过Vision Pro记录的人类动作数据，再结合英伟达的仿真和合成数据生成，能够高效训练机器人模型，降低对真实机器人数据的依赖。
NIM与OSMO：大幅缩短开发周期
英伟达推出的NIM微服务和OSMO编排服务，旨在简化机器人开发流程。NIM微服务提供预构建容器，可将部署时间从几周缩短到几分钟；OSMO则能协调分布式计算资源，将训练和仿真工作流从数月缩短至不到一周。这些工具共同加速了人形机器人的开发迭代。
开发者计划与早期访问阵容
英伟达启动了人形机器人开发者计划，提供对新产品及Isaac Sim、Isaac Lab、Jetson Thor和Project GR00T的提前访问。首批加入早期访问的公司包括1x、波士顿动力、字节跳动、Figure等。开发者现在可加入计划访问OSMO和Isaac Lab，不久后将获得NIM微服务访问权限。
Q&A
Project GR00T的主要功能更新是什么？
Project GR00T的更新包括远程操控和合成数据生成。
开发者如何使用苹果Vision Pro操控人形机器人？
开发者可以使用苹果Vision Pro远程操控人形机器人来执行任务。
英伟达为人形机器人开发者提供了哪些支持？
英伟达提供了一套服务、模型和计算平台，加速人形机器人的开发。
NVIDIA OSMO服务的主要功能是什么？
NVIDIA OSMO服务简化了机器人训练和仿真工作流程，将开发周期缩短至不到一周。
如何通过远程操作捕捉人类演示数据？
开发人员使用Apple Vision Pro捕捉少量远程演示，然后在NVIDIA Isaac Sim中仿真录音生成合成数据集。
英伟达如何解决机器人数据收集的难题？
英伟达通过GPU加速仿真，扩展机器人数据，解决了数据收集的难题。
