只需一次 API 调用，即可查找任意网站上的所有 URL
Decodo 的 /map 端点可返回网站上的所有页面，将爬取到的链接与站点地图合并为一个列表。您可以用它来规划 Crawl、审查网站结构，或在正式抓取数据之前确认哪些页面真正可被索引。
试试示例
可直接接入：
100+
现成模板
99.99%
成功率
200
每秒请求数
1.25 亿+
全球 IP
最多 1 万次
免费请求
先看清网站结构，再动手构建
网站页面随时都在增删变化。Decodo 的 /map 端点为您提供实时快照，而不是凭空猜测，让您接下来构建的一切都能精准锁定真正值得抓取的内容。
先规划范围，再执行 Crawl
先获取完整的 URL 列表，再只把您真正需要的页面交给 /crawl，避免盲目抓取整个网站。
审查网站的真实结构
查看哪些页面真正可以访问，适用于竞品调研或检查您自己的网站的可爬取性。
及时发现新增或删除的页面
按照您自己的计划（如 cron 定时任务或 n8n 工作流）运行 /map，并对比前后结果差异。
一次调用，整合站点地图与爬取链接数据
无需在自行发现链接之外，再单独获取和解析站点地图。
按路径或域名筛选
将大型网站精准缩小到与您的项目相关的部分。
将 URL 直接输入您自己的数据流水线
获取干净的 URL 列表，可直接循环处理、加入队列，或传入其他端点。
精选于：
灵活定价，随您的网页数据需求扩展
从免费套餐开始，每月最多 1 万次请求，之后再根据您的使用场景和用量选择最合适的订阅方案。
每种计划您都可以访问：
JavaScript 渲染
99.99% 成功率
支持 HTML、Markdown、XHR，以及 JSON、CSV、PNG（视目标而定）
一键接入 AI 集成
可直接用于 LLM 的 Markdown 格式
100+ 个预置模板
一个 API 密钥，通用所有端点
/scrape、/search、/map、/crawl
24/7 技术支持
14天退款保障
SSL安全支付
您的信息受256位SSL加密保护
常见问题
/map 端点实际可以用来构建什么？
任何需要在行动前先了解网站结构的项目都可以，例如 Crawl 范围规划、网站审查工具、站点地图监控，或为其他数据流水线提供数据的发现层。
/map 返回的是页面内容，还是只有 URL？
只返回 URL。如果您还需要页面内容，可将这些 URL 传入 /scrape 或 /crawl。
一次调用最多可以返回多少个 URL？
最多 14.7 万个，包含爬取到的链接和网站的站点地图。
是否支持多层嵌套的站点地图？
当前版本仅读取站点地图的第一层。对于非常大或多层嵌套的结构，单次调用可能无法完全覆盖。
如何查找网站上的所有 URL？
将网站地址发送至 /map 即可。它会检查站点地图并追踪网站上的链接，然后将找到的所有 URL 以单个列表的形式返回。如需聚焦大型网站的某一部分，可按路径或域名进行筛选。之后，您可以将所需的 URL 传入 /crawl 来提取其内容。
/map 和 /crawl 有什么区别？
/map 用于发现 URL。它会根据站点地图和网站上的链接返回页面列表，但不会获取每个页面的内容。/crawl 端点则更进一步，会访问这些页面并返回其内容。您可以先用 /map 了解网站上有哪些内容并挑选所需页面，再用 /crawl 提取这些页面。