Netflix计划推出新的移动用户界面，以支持未来十年的业务扩展。新界面将为持续迭代和改进奠定基础，同时正在测试包含节目和电影剪辑的垂直视频流。

随着生成性人工智能的发展，研究者关注AI代理在移动用户界面（UI）上执行任务的能力。通过专家研讨会，我们建立了影响分类，并收集了用户认为重要的UI操作数据。研究表明，不同大型语言模型在理解这些影响方面存在差异，且在分类复杂影响时显著不足。

Ferret-UI是一种新型多模态大语言模型，旨在增强对移动用户界面的理解。它具备引用、定位和推理能力，能够处理不同分辨率的UI屏幕。在图标识别和文本查找等基本任务上，Ferret-UI的表现优于大多数开源模型和GPT-4V。