Auto-UI 是一种多模态解决方案，通过直接与用户界面交互实现任务自动化，无需解析环境或依赖特定 API。它使用链式动作技术，利用动作历史和未来计划来辅助决策。在 AITW 基准测试中，Auto-UI 在应用操作、网络搜索和网购任务中表现优异，动作类型预测准确率达 90%，整体动作成功率为 74%。