Cloudflare 发布了新的 /crawl 端点,支持一键爬取全站并输出为 HTML、Markdown 或 JSON 格式。
📝 详细摘要
该推文关注 Cloudflare 开发者平台的一项重大更新:新增了 /crawl 接口。这一功能允许开发者通过单一 API 调用直接爬取整个站点的内容,并支持 AI 友好的 Markdown 和 JSON 格式。此举被视为对 Firecrawl 等现有爬虫工具的直接竞争,进一步增强了 Cloudflare 在 AI 数据处理基础设施领域的地位。
📊 文章信息
AI 评分:82
来源:Fox@MkSaaS.com(@indie_maker_fox)
作者:Fox@MkSaaS.com
分类:人工智能
语言:中文
阅读时间:1 分钟
字数:131
标签: Cloudflare, Firecrawl, 网络爬虫, 数据采集, RAG