浙江大学、上海人工智能实验室和牛津大学联合提出了DetToolChain,一种释放多模态大语言模型检测能力的新提示范式。DetToolChain通过设计视觉提示和检测推理提示,能够让多模态大模型学会精确检测,无需训练。实验证明,DetToolChain在多个任务上表现出优越性能,包括开放词汇检测、描述目标检测、指称表达理解和定向目标检测。
介绍了ProAgent框架,利用大型语言模型预测合作伙伴决策并改进自身计划。实验证明ProAgent在与人工智能代理和人类合作中表现优越。
完成下面两步后,将自动完成登录并继续当前操作。