本研究提出RealWebAssist基准，旨在解决现有网络代理在长时间任务中处理模糊用户指令的不足，发现先进模型在理解和执行指令方面面临显著挑战。

本研究探讨了AI代理在软件工程中处理模糊用户指令的能力，发现有效的交互显著提升了模型对不明确输入的处理效果，强调了交互的重要性。

本研究使用SetItUp框架研究了开发能够理解模糊指令以创建功能性物体布局的机器人的挑战。通过利用少量的训练示例和人类设计的程序草图，将布局问题分解为两个子问题，并利用大型语言模型提出新场景中的物体之间的抽象空间关系作为约束，验证了框架在数据集上的卓越性能。