量子位
·
北大提出首个通用指令导航大模型系统 | CoRL 24
原文中文，约1700字，阅读约需4分钟。
📝
内容提要
北京大学董豪团队提出了InstructNav，首个通用指令导航大模型系统。该系统能根据指令帮助机器人寻找物体、走到指定位置，并满足人类的抽象需求。InstructNav在多个零样本导航任务上表现出色，获得最高成功率。
🎯
关键要点
-
北京大学董豪团队提出了InstructNav，首个通用指令导航大模型系统。
-
InstructNav能够根据指令帮助机器人寻找物体、走到指定位置，并满足人类的抽象需求。
-
该系统在多个零样本导航任务上表现出色，获得最高成功率。
-
动态导航链路将不同类型的导航指令统一为标准形式，提升了导航的灵活性。
-
InstructNav利用大语言模型进行任务规划和常识推理，实时更新导航链路。
-
多源价值地图用于将大模型的规划结果映射到机器人行动中，提升导航效果。
-
InstructNav在物体目标导航、视觉语言导航和需求驱动导航任务上实现了新的SOTA。
❓
延伸问答
InstructNav是什么？
InstructNav是北京大学董豪团队提出的首个通用指令导航大模型系统，能够根据指令帮助机器人寻找物体和走到指定位置。
InstructNav在导航任务上表现如何？
InstructNav在多个零样本导航任务上表现出色，获得最高成功率，超越了现有的所有方法。
动态导航链路的作用是什么？
动态导航链路将不同类型的导航指令统一为标准形式，提升了导航的灵活性和适应性。
InstructNav如何处理不同类型的导航指令？
InstructNav利用大语言模型进行任务规划和常识推理，能够根据原始指令动态更新导航链路。
多源价值地图在InstructNav中有什么作用？
多源价值地图用于将大模型的规划结果映射到机器人行动中，提升导航效果。
InstructNav的研究成果在哪些会议上发表？
InstructNav的研究成果已被CoRL 2024会议录用。
🏷️
