本研究开发了上下文感知教学任务助手InsTALL,解决了多模态虚拟助手在执行多步骤任务时的上下文感知不足问题。该系统通过在线视觉流和任务数据,实现了对用户查询的实时响应,并在多模态活动理解和自动错误识别方面表现优异。
完成下面两步后,将自动完成登录并继续当前操作。