本研究提出了一种新颖的X-Sim框架,旨在克服跨躯体学习方法在处理人类与机器人动作差异时的局限性。X-Sim通过学习物体运动信号来优化机器人策略,显著提升多项操作任务的性能,并能适应现实世界的变化。
本研究提出了Lift3D框架,旨在解决机器人在操作任务中对3D几何信息需求不足的问题。通过增强2D模型的3D表示,Lift3D在多个仿真和现实场景中表现优于现有方法。
本文介绍了一种视觉模仿学习方法,机器人通过自监督学习从人类演示中学习操作任务。该方法将模仿学习视为状态估计问题,机器人利用摄像头自动移动以获取对象信息。实验结果表明,该方法能够从单一演示中学习多样技能,并在多个任务中表现出色。
EgoMimic框架通过自我中心视频和3D手部追踪,解决了模仿学习中演示数据规模和多样性不足的问题。实验结果表明,EgoMimic在多种操作任务上优于现有方法,并在数据扩展方面表现良好。
本文介绍了一种视觉模仿学习方法,机器人通过人类演示学习操作任务,无需先前知识。该方法将模仿学习视为状态估计问题,利用自监督训练和摄像头自动移动,能够从单个人类演示中学习多样技能,生成稳定的控制器。
HomeRobot 是一种经济实惠的柔性机器人,旨在完成日常任务。研究提出了基于模拟的基准测试,利用强化学习和启发式模型提高性能。通过改进语义分割模块和放置技能策略,成功率显著提升。MOKA 方法将视觉语言模型应用于机器人操作任务,验证了其在多种操纵任务中的有效性。OK-Robot 结合视觉-语言模型,实现了无需训练的拾取和放置操作,成功率在清洁环境中达到82%。
本文介绍了一种新的基于模型的强化学习方法,结合背景规划和子目标模型,显著提升了学习效率。实验结果表明,该方法在机器人导航和操作任务中优于传统方法,有效解决了高内存和计算使用率的问题。
本研究探讨通过在多样化人类视频数据上预训练视觉表示,以提升机器人操作任务的学习效率。使用R3M表示,成功率提高20%以上,且在真实环境中仅需20个演示即可完成多项操作任务。研究还涉及强化学习和障碍物避让等技术,推动机器人操控能力的发展。
ManiSkill2 是 SAPIEN ManiSkill 基准的下一代版本,包含 20 个操作任务和 2000 多个物体模型,支持多种算法和视觉输入学习。研究提出了一种基于在线抓取姿势融合的移动操作方法,能够实时评估抓握可行性。此外,SAPIEN Manipulation Skill Benchmark 用于操作技能测试,推动 3D 深度学习和学习从示范(LfD)算法的发展。
该研究提出了一种名为语言条件化技能发现(LCSD)的学习方法,通过数学方法评估技能与语言指令之间的关系。实验结果显示,该方法在语言条件化的机器人导航和操作任务中表现优越。
完成下面两步后,将自动完成登录并继续当前操作。