将任意页面 Scrape 为可直接用于 LLM 的 Markdown，JS 密集型和受反机器人保护的网站也不在话下

使用网页数据 API，只需将 URL 发送至 /scrape 端点，并将输出格式设为 Markdown 即可，JavaScript 渲染和反机器人绕过均会自动处理。

开始使用前，请先在 Decodo 仪表盘的网页数据 API 板块中激活免费套餐（每月最多 1 万次请求），然后参考 API 文档中的 Python 和 TypeScript 示例脚本即可。

HTML 中充斥着标签、脚本和样式代码，对 LLM 而言毫无意义，只会增加噪音并消耗 token。Markdown 在去除标记的同时保留了内容及其结构（标题、列表、链接），处理成本更低，也更便于为 RAG 进行分块。网页数据 API 可返回干净的、可直接用于 LLM 的 Markdown、结构化 JSON 或 HTML，您可以根据自己的数据流水线选择合适的格式。

使用 /scrape 时，只会提取您指定的单个页面。使用 /crawl 时，系统会自动追踪网站页面，每个任务最多可将 1 万个页面提取为 Markdown 或 JSON；此外，您还可以先使用 /map 从域名的站点地图和链接中发现约 14.7 万个 URL。

可以。AI 智能体可按需调用 /scrape 提取页面，依托 Decodo 1.25 亿+ IP 资源池，在受保护目标上的成功率高达 99.99%+。对于更复杂的任务，AI 智能体还可搭配 /search 获取实时网页结果，搭配 /crawl 进行全站数据提取。我们的文档中也提供了 MCP 设置指南。

任何需要干净读取网页内容、又不想自己维护抓取逻辑的项目都可以，例如价格和库存监控工具、RAG 数据摄取流水线、潜在客户开发工具、调研智能体，或您自有产品背后的数据层。您只需发送一个 URL，即可获得干净的数据。