可微分机器人渲染

BriefGPT - AI 论文速递 · 2024-10-17T00:00:00Z

研究提出了一种新的视觉语言模型范式，提升机器人对新对象和指令的适应性。通过RoboUniView方法，学习统一视图表示，克服摄像机变化的影响。在CALVIN基准测试中，成功率从88.7%提升至96.2%。该模型在未知摄像机参数下仍表现出色，支持多数据集联合学习，展现出卓越的适应性和灵活性。研究代码已公开。