量子位
·
北大提出首个通用指令导航大模型系统 | CoRL 24
💡
原文中文，约1700字，阅读约需4分钟。
📝
内容提要
北京大学董豪团队提出了InstructNav，首个通用指令导航大模型系统。该系统能根据指令帮助机器人寻找物体、走到指定位置，并满足人类的抽象需求。InstructNav在多个零样本导航任务上表现出色，获得最高成功率。
🎯
关键要点
- 北京大学董豪团队提出了InstructNav，首个通用指令导航大模型系统。
- InstructNav能够根据指令帮助机器人寻找物体、走到指定位置，并满足人类的抽象需求。
- 该系统在多个零样本导航任务上表现出色，获得最高成功率。
- 动态导航链路将不同类型的导航指令统一为标准形式，提升了导航的灵活性。
- InstructNav利用大语言模型进行任务规划和常识推理，实时更新导航链路。
- 多源价值地图用于将大模型的规划结果映射到机器人行动中，提升导航效果。
- InstructNav在物体目标导航、视觉语言导航和需求驱动导航任务上实现了新的SOTA。
➡️
