H2O与OmniH2O——全身远程操作且RL训练的人形机器人(含师生学习与策略蒸馏详解)
💡
原文中文，约6000字，阅读约需15分钟。
📝
内容提要
CMU研究团队开发了H2O系统，实现了人形机器人的实时全身远程操作。通过逆运动学和强化学习，将人类动作数据集应用于机器人，解决了动态差异问题。H2O使用RGB摄像头捕捉动作，无需标记或传感器，开创了基于学习的远程操作方法，为自主代理训练奠定基础。
🎯
关键要点
- CMU研究团队开发了H2O系统，实现了人形机器人的实时全身远程操作。
- H2O系统通过逆运动学和强化学习，将人类动作数据集应用于机器人，解决了动态差异问题。
- H2O使用RGB摄像头捕捉动作，无需标记或传感器，开创了基于学习的远程操作方法。
- 缺乏可行动作数据集是全身人形机器人远程操作的主要挑战。
- 引入自动化的“模拟到数据”过程，将人类动作数据集重定向为适用于人形机器人的动作。
- CMU的工作实现了人类动作的实时全身跟踪，属于基于学习的全身远程操作的首个实现。
- 将全身实时人形远程操作建模为目标条件下的强化学习问题。
- 使用参数化人体模型SMPL来表示人形机器人，便于处理人体形状和动作。
- 设计了一种“模拟到数据”的方法，以补充传统的动作重定向，确保仿人机器人能够模仿人类动作。
- 通过优化形状参数将SMPL身体模型对齐到类人结构，生成干净的动作数据集。
➡️
