小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI
朱玉可团队新作:看一眼就能模仿,大模型让机器人轻松学会撒盐

德克萨斯大学与NVIDIA研究团队提出的OKAMI方法,利用单个RGB-D视频教人形机器人模仿操作。该方法通过两阶段处理生成参考规划并适应物体位置,成功完成撒盐和放玩具等任务。OKAMI展示了在不同环境下的泛化能力,但下半身运动和形状变化适应性仍需改进。

朱玉可团队新作:看一眼就能模仿,大模型让机器人轻松学会撒盐

机器之心
机器之心 · 2024-10-23T13:04:04Z

在10月23日的长沙程序员节开幕式上,开发者被邀请来长沙工作与创业。文章介绍了改进的3D扩散策略iDP3和OKAMI人形机器人,后者通过单个RGB视频模仿人类操作,并结合视觉模型识别物体,提升在不同环境中的操作能力。

斯坦福iDP3——改进3D扩散策略以赋能人形机器人的训练:不再依赖相机校准和点云分割(含DP3的详解)

结构之法 算法之道
结构之法 算法之道 · 2024-10-23T09:25:32Z

文章讨论了从人类视频中学习机器人操作技能的挑战与进展。传统方法面临动作信息不足和人机差异问题。研究者通过无监督图像翻译和关键点检测改善学习效果,介绍了如Learning by Watching、DexMV等研究,利用视觉语言模型提升机器人模仿学习的准确性和实用性。

基于人类视频的模仿学习与VLM推理规划:从DexMV、MimicPlay、SeeDo到人形OKAMI、Harmon(含R3M的详解)

结构之法 算法之道
结构之法 算法之道 · 2024-10-20T14:57:24Z

本文介绍了一种视觉模仿学习方法,通过自监督学习从单个人类演示中学习机器人操作。该方法将模仿学习视为状态估计问题,利用末端执行器姿态作为状态。在训练中,摄像头自动围绕对象移动。测试时,机器人沿线性路径移动并重放演示速度,生成复杂交互轨迹。实验表明,该方法能从单次演示中学习多种技能,控制器稳定且可解释。

OKAMI:通过单个视频模仿教导类人机器人操作技能

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-10-15T00:00:00Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
友情链接: MOGE.AI 九胧科技 模力方舟 Gitee AI 菜鸟教程 Remio.AI DeekSeek连连 53AI 神龙海外代理IP IPIPGO全球代理IP 东波哥的博客 匡优考试在线考试系统 开源服务指南 蓝莺IM Solo 独立开发者社区 AI酷站导航 极客Fun 我爱水煮鱼 周报生成器 He3.app 简单简历 白鲸出海 T沙龙 职友集 TechParty 蟒周刊 Best AI Music Generator

小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码