The Cloudflare Blog
·
为智能代理引入Markdown
💡
原文英文，约1300词，阅读约需5分钟。
📝
内容提要
在线内容和商业发现方式正在快速演变，传统搜索引擎流量逐渐被需要结构化数据的AI爬虫取代。由于其简洁性，Markdown格式成为AI处理的首选，Cloudflare现已支持实时将HTML转换为Markdown，从而提升AI系统的效率。
🎯
关键要点
- 在线内容和商业发现方式正在快速演变，传统搜索引擎流量逐渐被AI爬虫取代。
- Markdown格式因其简洁性成为AI处理的首选，Cloudflare支持实时将HTML转换为Markdown。
- 将原始HTML提供给AI会浪费计算资源，而Markdown格式能显著减少token使用。
- Web主要由HTML构成，页面重量逐年增加，导致解析困难。
- Cloudflare的网络支持实时内容转换，AI系统可以请求Markdown格式的页面。
- Markdown for Agents功能允许AI爬虫直接获取Markdown格式的内容，简化了处理流程。
- Cloudflare的内容信号政策允许用户表达内容使用偏好，确保内容被AI有效利用。
- Cloudflare提供多种方式将文档转换为Markdown，包括Workers AI和REST API。
- Cloudflare Radar现在提供AI爬虫流量的内容类型洞察，帮助跟踪AI系统的演变。
- Markdown for Agents功能现已在Cloudflare的开发者文档和博客中启用，用户可以尝试。
❓
延伸问答
Markdown格式为何对AI处理更为理想？
Markdown格式因其简洁性和明确的结构，能显著减少token使用，提高AI处理效率。
Cloudflare如何支持HTML到Markdown的实时转换？
Cloudflare通过内容协商头支持实时将HTML转换为Markdown，AI系统可以请求Markdown格式的页面。
使用Markdown格式对AI爬虫有什么好处？
使用Markdown格式可以减少计算资源浪费，提高AI爬虫获取和处理内容的效率。
如何启用Cloudflare的Markdown for Agents功能？
登录Cloudflare仪表板，选择账户和区域，找到快速操作并启用Markdown for Agents按钮即可。
Markdown for Agents功能的内容信号政策是什么？
内容信号政策允许用户表达内容使用偏好，确保内容被AI有效利用。
Cloudflare Radar如何帮助跟踪AI爬虫流量？
Cloudflare Radar提供AI爬虫流量的内容类型洞察，帮助分析AI系统的演变。
🏷️
标签
➡️
