InsTALL: Context-aware Instructional Task Assistance Based on Multi-modal Large Language Models

💡 原文英文,约100词,阅读约需1分钟。
📝

内容提要

本研究开发了上下文感知教学任务助手InsTALL,解决了多模态虚拟助手在执行多步骤任务时的上下文感知不足问题。该系统通过在线视觉流和任务数据,实现了对用户查询的实时响应,并在多模态活动理解和自动错误识别方面表现优异。

🏷️

标签

➡️

继续阅读