AI SDK 的 HarnessAgent 层现已在所有适配器(如 Claude Code、Codex、Cursor 等)中支持图像输入。用户可在标准消息格式的内容数组中混合传入文本与图像文件,由底层视觉模型处理。文中还提供了使用 Codex 适配器描述图片的代码示例。
Vercel 原生支持 Python,可自动识别 FastAPI、Flask、Django,运行 CPython 并支持 uv 依赖管理。提供 Sandbox、AI SDK、Workflow SDK 等原生 SDK,用于构建智能体与工作流。通过 Vercel Services 可将 Python 后端与 JavaScript 前端部署在同一项目中,共享预览、原子部署与回滚,并支持服务间私有调用。
Black Forest Labs 的 FLUX 3 Image 已上线 AI Gateway,无需其账号,仅用一个 API 密钥即可文生图或改图。它支持最多十张参考图编辑、五种分辨率(768×768 至 4K)及方、竖、横三种比例。在 AI SDK 7 及以上用模型 ID bfl/flux-3-image 调用 generateImage,也可通过 AI CLI 在终端生成并保存图片。
Browserbase 的搜索与抓取工具已接入 AI Gateway,开发者可用一个 API 密钥跨模型调用,为支持工具调用的模型添加网页搜索和页面抓取能力。需 AI SDK 7.0.116 及以上版本,通过 gateway.tools 传入 browserbaseSearch 和 browserbaseFetch 即可使用。
AI SDK 的 harness 层支持原生订阅认证,通过统一 HarnessAgent 接口运行不同编码代理,无需修改代码或配置。认证模式包括直接、自动和 ai-gateway 三种,凭证在主机边界解析,OAuth 令牌按需刷新,沙箱中注入占位凭证。支持 Claude Code、Codex、Cursor、GitHub Copilot 等。
AI SDK 的 harness 层新增 GitHub Copilot 支持,通过官方 @ai-sdk/harness-github-copilot 适配器接入。开发者可在 HarnessAgent 中传入 githubCopilot 运行该代理,底层借助 ACP 协议连接。目前支持的 harness 还包括 Claude Code、Cline、Codex、Cursor 等。
OpenAI 推出 GPT 6 Astra,现已在 AI Gateway 上线,专为长期代理任务设计,涵盖软件工程、计算机与浏览器操作、科学研究及专业工作流。它能导航软件、填写表单、分析数据、运行模拟及构建测试网站,并改进指令遵循,可融入新需求而不失先前约束,自主工作并合理假设。开发者可通过 AI SDK 或编码代理集成调用。
AI SDK新增对fx开源编码代理的支持,通过@ai-sdk/harness-fx适配器集成,基于Agent Client Protocol连接。开发者可用HarnessAgent统一接口运行fx,无需单独构建集成。fx现与Claude Code、Cline等工具并列,成为受支持的编码代理之一。
腾讯AI Gateway现已支持Hy4 Preview模型。该模型为开源混合专家模型,总参数770B,每令牌激活49B,支持100万上下文,适用于长时编码、文档分析、游戏开发及科学推理。用户可通过AI SDK设置模型为tencent/hy4-preview,并接入Claude Code等编码代理。AI Gateway提供统一API、成本追踪、重试及故障转移功能,无加价及平台费。
AI SDK新增Cursor适配器,支持通过统一HarnessAgent接口运行不同编码代理,无需修改应用代码。该适配器基于ACP协议连接Cursor,目前支持的代理包括Cursor、Claude Code、Cline、Codex等,未来将扩展更多。
Meta Superintelligence Labs的Muse Image模型已上线AI Gateway,这是其首个图像模型,支持文本生成图像和图像编辑。用户可通过AI SDK调用,设置模型为meta/muse-image-1.0,使用generateImage功能,并支持参考图像混合。AI Gateway提供统一API、成本追踪、故障转移和性能优化,无加价或平台费。
AI SDK新增Cline适配器,通过统一HarnessAgent接口运行Cline,无需修改应用代码即可切换运行时。Cline在主机进程运行,沙箱仅作远程文件系统和shell,不安装桥接进程。目前支持Claude Code、Cline、Codex等七种工具,未来将扩展更多。
AI SDK新增Grok Build适配器,通过统一HarnessAgent接口运行编码代理,无需修改应用代码即可切换运行时。基于ACP适配器构建,支持Claude Code、Codex、Deep Agents、Grok Build、OpenCode、Pi等,未来将扩展更多。
AI SDK新增@ai-sdk/harness-acp包,支持任何兼容Agent Client Protocol(ACP)的harness。该包作为元适配器,通过createACP配置harness映射,实现如Codex等ACP兼容包的无缝集成。但建议Claude Code和Codex优先使用直接适配器,仅在无直接适配器时使用ACP方案。
AI SDK团队构建了一个软件工厂,用多个专用代理自动处理开源项目的issue和PR。工厂代理负责分类、分析、实现、审查和回移植,人类仍保留最终合并权。运行四周后,工厂贡献了25-35%的合并PR,关闭了70-80%的issue,显著减少了积压。
xAI的Grok Imagine Image 2.0预览版已在AI Gateway上线,能精确遵循指令,规划排版与布局,生成信息图、海报等复杂视觉内容,并支持图像编辑,保持主体一致性。用户可通过AI SDK调用,设置模型为xai/grok-imagine-image-2.0-preview,选择1k或2k分辨率,并支持多图生成及基于提示的图像修改。
MiniMax H3模型已在AI Gateway上线,支持从文本、起始图像、首尾帧或参考素材生成2K视频,时长5至15秒,提供多种宽高比。用户可通过AI SDK设置模型参数,实现文本转视频、图像动画化及参考素材引导生成,并支持在提示中引用多个参考内容。
Sandstone是一个基于Vercel构建的法律工作流自动化平台,管理超1000个日常法律请求。通过AI SDK实现多步骤代理工作流,利用Vercel预览部署和Secure Compute提升效率与安全性。上线6个月营收增长40倍,获3000万美元融资,计划扩展至更多法律部门。
AI Gateway新增流式转录功能,支持边捕获音频边输出实时转录结果,降低延迟,适用于实时字幕和语音输入。该功能处于测试阶段,可通过AI SDK的streamTranscribe函数使用,兼容多种模型如OpenAI和xAI,并支持为智能体添加语音模式,无需改动现有文本处理流程。
AI Gateway现已支持Gemini 3.6 Flash和3.5 Flash-Lite。前者提升编码、智能体及网页开发质量,减少令牌消耗;后者增强子任务处理能力。用户可通过AI SDK设置模型,享受统一API、成本追踪、重试及优化功能,且无加价或平台费。
完成下面两步后,将自动完成登录并继续当前操作。