量子位
·
拜拜了GUI！中科院团队“LLM友好”计算机使用接口来了
💡
原文中文，约3700字，阅读约需9分钟。
📝
内容提要
中科院团队提出的GOI“声明式”计算机接口，旨在提高LLM智能体在传统GUI下的成功率和效率。通过自动化复杂操作，GOI使LLM专注于任务规划，成功率从44%提升至74%。该研究为未来AI交互设计提供了新思路。
🎯
关键要点
- 中科院团队提出GOI“声明式”计算机接口，旨在提高LLM智能体在传统GUI下的成功率和效率。
- 现有LLM智能体面临成功率低和效率差的核心问题，主要由于传统GUI的命令式设计。
- GUI的设计假设与LLM的能力模型不匹配，导致LLM在使用GUI时效率低下且易出错。
- GOI通过将接口从“命令式”转换为“声明式”，实现策略与机制的分离。
- GOI提供三种声明式原语：访问、状态和观察，简化了LLM的操作过程。
- GOI的实现分为离线建模和在线执行两个阶段，确保了无路径歧义的导航。
- 实验结果显示，GOI显著提升了LLM的成功率，从44%提升至74%。
- 引入GOI后，失败的原因从机制层面转向策略层面，降低了机制错误的发生。
- GOI为未来AI交互设计提供了新思路，建议未来操作系统应原生支持声明式接口。
➡️
