智能体体验与智能体驱动的增长:对话Caelean Barnes

智能体体验与智能体驱动的增长:对话Caelean Barnes

💡 原文英文,约4900词,阅读约需18分钟。
📝

内容提要

Gauge联合创始人Caelean Barnes指出,编码智能体正取代开发者成为新的获客渠道,决定选用哪些API和工具。Gauge在沙箱中运行Claude Code、Codex等智能体,观察其阅读文档、选择工具的过程,并通过大量试验评估提示词、文档、CLI和技能的效果。关键发现包括:技术文档比营销内容更能影响智能体决策;错误信息比普通提示更易被理解,Clerk借此使CLI开户数增至约三倍;智能体倾向在已有技术栈内交叉推荐产品。Gauge还开源了本地版本。

🔎

延伸解读

从SEO到AEO:决策入口的迁移

文章指出,开发者选择API和工具的决定权正从传统搜索和聊天机器人转向编码智能体。Gauge的观察显示,智能体不仅推荐产品,还能直接实施集成,因此成为完整的获客渠道。这意味着技术团队需要将智能体视为新的“用户”,而不仅仅是流量来源。

文档与错误信息:影响智能体决策的关键

与营销内容相比,技术文档对智能体决策影响更大。Clerk将模糊的“领取密钥”提示改为明确的错误信息后,CLI开户数增至约三倍。这表明智能体对结构化、可操作的错误反馈理解更清晰,厂商应优先优化文档和错误消息的明确性。

交叉推荐:智能体倾向现有技术栈

智能体在已有技术栈内更倾向于交叉推荐产品。例如,Supabase在数据库领域被推荐率高,但在边缘函数或认证领域单独推荐率极低;然而,若用户已使用Supabase数据库,其边缘函数被推荐率超过90%。这提示企业应识别自身优势入口,并确保智能体知晓关联产品。

CLI与LLMs.txt:智能体偏好的交互面

文章发现,编码智能体更高效地使用CLI,因其令牌消耗更低且模式更确定。同时,LLMs.txt等标准虽不被聊天机器人读取,但编码智能体会主动浏览和读取。团队应确保CLI功能与主应用对齐,并考虑在CLI内提供完整上下文以减少智能体外搜。

❓

Q&A

Gauge 是如何测试编码智能体选择工具的过程的?

Gauge 将 Claude Code、Codex 等编码智能体放入沙箱,给它们提示词,观察它们阅读文档、选择工具的行为。可以反复运行、检查点、回滚,并测试不同版本的提示词、文档、CLI 和技能,根据成功标准评估智能体完成用户旅程的效果。

对于编码智能体来说,技术文档和营销内容哪个更重要?

技术文档比营销内容更能影响智能体的决策。Gauge 发现,智能体主要依赖技术文档来做出选择,文档是否易于上手、是否有针对特定技术栈(如 Django、Next.js)的指南,会显著影响智能体的选择。

Clerk 如何通过修改错误信息将 CLI 开户数提升约三倍?

Clerk 原本给智能体一个提示框说“去领取密钥”,但智能体经常忽略或困惑。Gauge 建议将其改为一个错误信息,智能体对错误的理解更清晰,从而成功开户。这一改动使通过 CLI 创建的账户数增加了约三倍。

智能体在推荐产品时,是否会倾向于交叉推荐同一技术栈内的产品?

是的。Gauge 发现,如果用户已经在使用某个产品(如 Supabase 数据库),智能体在推荐相关产品(如边缘函数、认证)时,会以极高概率推荐同一厂商的产品。PostHog 也是如此,一旦使用其产品分析,智能体在推荐会话回放或功能开关时也会优先推荐 PostHog。

LLMs.txt 对聊天机器人和编码智能体的作用有何不同?

Gauge 发现,ChatGPT、Claude 等聊天机器人从不读取 LLMs.txt,因为它们主要通过搜索与网络交互,而 LLMs.txt 很难出现在搜索结果中。但编码智能体会直接浏览网站并读取 LLMs.txt 和 Markdown 版本的页面,因此这些标准对编码智能体非常重要。

团队在构建 CLI 以提升智能体体验时,最常见的错误是什么?

最常见的错误是将 CLI 视为附加功能,而不是完整实现应用的所有能力。CLI 应该具备与应用程序、SDK 和 API 同等的功能,这样智能体才能完全操作软件。此外,在 CLI 中直接提供上下文(如命令描述、文档链接)可以减少智能体搜索外部信息的需求。

Gauge 即将推出的开源版本有什么特点?

Gauge 将推出开源版本,允许开发者在本地通过自己的编码智能体运行编码会话,对技能、CLI、文档和 SDK 进行本地优化(爬山)。无需 Gauge 账户,使用自己的智能体和令牌即可。

🏷️

标签

➡️

继续阅读