全部 未讀 (11821) ★ 收藏 (0) 🤖 人工智能 (7594) 📊 商业科技 (1791) 💻 软件编程 (1198) 📁 个人成长 (736) 🎨 产品设计 (209) 📁 生活文化 (109) 📁 投资财经 (71) 📁 媒体资讯 (69) 📁 AI 产品 (39) 📁 AI (5)
篩選中: 🏷️ Web Scraping 共 6 篇 ✕ 清除篩選
11823
全部文章
11821
未讀
140
今日新增
0
收藏
📡 Poller 最後抓取: 1 小時前 (04-16 14:00)
BestBlogs 精選 (11804)

🏷️ 熱門標籤

AI Agent 1324 AI 智能体 734 Claude Code 645 Anthropic 622 LLM 563 AI 编程 501 OpenClaw 498 开源 439 AI 安全 396 AI 396 Claude 384 OpenAI 362 软件工程 354 开发者工具 343 生产力 308 GitHub 251 自动化 238 AI 基础设施 227 AI 开发 225 MCP 223
推荐一款高效的 Web 抓取工具 XCrawl
📌 一句话摘要 博主推荐使用 XCrawl 工具进行高效的网页抓取,支持 MCP 和 curl,可将搜索结果直接转换为 Markdown 或 JSON,适合大模型训练资料收集。 📝 详细摘要 博主分享了在进行大模型训练资料收集时使用的工具 XCrawl。该工具支持单页抓取、全站递归及搜索结果采集
📅 2026-04-03 12:36 (13 天前) Tw93 软件编程 1 分鐘 ★ 81
XCrawl 数据抓取 大模型训练 开发者工具
推荐一款 LLM 友好的爬虫工具:XCrawl
📌 一句话摘要 独立开发者推荐了一款名为 XCrawl 的爬虫工具,具备 LLM 友好的数据抓取能力,并提供慷慨的免费额度。 📝 详细摘要 该推文推荐了一款名为 XCrawl 的爬虫工具。作者指出其核心优势在于能够抓取单页并返回 LLM 友好的数据,同时支持全站抓取及 OpenClaw 技能扩展
📅 2026-03-30 17:00 (16 天前) Viking 软件编程 3 分鐘 ★ 81
XCrawl 爬虫 Web Scraping LLM
利用 XCrawl 实现 Claude Code 更新自动化监控
📌 一句话摘要 通过 XCrawl 网页抓取服务结合 OpenClaw,实现对 Claude Code 更新日志的自动抓取与总结。 📝 详细摘要 作者分享了利用 XCrawl 网页抓取 API 监控 Claude Code 更新的实操方案。XCrawl 提供了搜索、站点扫描、内容抓取和全站递归爬
📅 2026-03-30 13:58 (17 天前) Ding 人工智能 1 分鐘 ★ 81
XCrawl Claude Code 自动化 Web Scraping
OpenClaw 接入 XCrawl 实现网页自动化抓取
📌 一句话摘要 介绍如何通过简单的指令将 XCrawl 接入 OpenClaw,从而增强 AI Agent 的网页抓取与信息处理能力。 📝 详细摘要 该推文通过引用内容,详细介绍了将 XCrawl 工具集成到 OpenClaw 中的方法。通过配置 API Key 和 Skill 文件夹,用户可以
📅 2026-03-30 15:16 (16 天前) Berryxia.AI 人工智能 3 分鐘 ★ 79
AI Agent OpenClaw XCrawl Web Scraping
一种将网站转化为 API 的创新技术思路
📌 一句话摘要 作者展示了一种简单且优雅的将现有网站直接作为 API 使用的技术方案,具有极高的实用性与争议性。 📝 详细摘要 推文揭示了一种极具启发性的开发技巧,即通过某种“丧心病狂”的手段将原本不提供接口的网站直接转化为可调用的 API。虽然作者未在文字中详述底层原理(可能涉及 Headle
📅 2026-03-14 16:14 (03-14 16:14) yan5xu 软件编程 3 分鐘 ★ 82
API 开发 Web Scraping 逆向工程 开发技巧
Cloudflare 推出全新爬虫基础服务 /crawl
📌 一句话摘要 Cloudflare 发布了支持 HTML、Markdown 和 JSON 返回的 /crawl API 接口,简化了大规模网页爬取流程。 📝 详细摘要 Cloudflare 开发者平台推出了全新的 `/crawl` 端点服务。该服务允许用户通过单一 API 调用完成整个站点的爬
📅 2026-03-11 09:43 (03-11 09:43) Viking 软件编程 2 分鐘 ★ 82
Cloudflare 爬虫 API Web Scraping