内容提要
英伟达在SIGGRAPH大会上发布了用于机器人仿真和学习的NVIDIA NIM微服务和框架,以及用于机器人工作负载的NVIDIA OSMO编排服务。此外,他们还发布了通用场景描述(OpenUSD)的重大成果,扩大了该框架在机器人、工业设计和工程领域的应用。这些新技术和工具将帮助开发下一代人形机器人,并支持可视化工业设计、工程项目和环境仿真的应用。
延伸解读
物理AI浪潮下的机器人开发新范式
英伟达在SIGGRAPH 2024上明确将机器人视为AI的下一波浪潮,并推出NIM微服务和OSMO编排服务,旨在解决人形机器人开发中数据稀缺、训练成本高、工作流复杂等痛点。通过合成数据生成和云原生工作流管理,开发者能够以更低成本、更快速度迭代机器人模型,这标志着物理AI正从研究走向工程化落地。
OpenUSD生态扩张:从创意到工业
英伟达此次将OpenUSD的生成式AI能力以NIM微服务形式开放,并推出多种连接器和开发套件,显著降低了工业领域构建高精度虚拟世界的门槛。与西门子、富士康等企业的合作表明,OpenUSD正从影视特效向工业数字孪生、机器人仿真等场景渗透,有望成为工业元宇宙的基础设施。
远程操作与合成数据:降低人形机器人训练门槛
文章展示了利用Apple Vision Pro捕获少量人类演示,再通过MimicGen和Robocasa生成大量合成数据的工作流。这种方法减少了对昂贵真实数据的依赖,使开发者能更高效地训练人形机器人基础模型。OSMO则负责调度计算任务,将开发周期从数月压缩至一周,加速了从数据采集到模型部署的闭环。
Q&A
英伟达在SIGGRAPH 2024上发布了哪些新技术?
英伟达发布了NVIDIA NIM微服务、NVIDIA OSMO编排服务和通用场景描述(OpenUSD)的重大成果。
NVIDIA NIM微服务的主要功能是什么?
NVIDIA NIM微服务支持生成合成运动数据和机器人任务环境,简化机器人训练和仿真工作流。
NVIDIA OSMO编排服务如何帮助机器人开发?
NVIDIA OSMO编排服务协调和扩展复杂的机器人开发工作流,将开发周期缩短至一周。
英伟达如何降低人形机器人的训练成本?
通过展示远程操作生成合成数据的工作流,英伟达降低了训练人形机器人的成本和时间。
OpenUSD在工业设计中的应用是什么?
OpenUSD扩展了在机器人、工业设计和工程领域的应用,提高了开发者构建高精度虚拟世界的能力。
富士康如何利用英伟达的技术?
富士康利用NIM微服务和Omniverse创建数字孪生,加速工业制造和自主机器的发展。