XCrawl30秒即可开始。无需信用卡，免费体验全部功能。开始免费试用
XCrawl解决方案Details of runs Scraper API

Details of runs Scraper API

XCrawl 的 Runs Scraper API 是开发者获取所有网站列表、网站所有页面列表等的终极网页抓取 API。轻松运行爬虫任务，构建网站列表，发掘最佳网站列表，并提取网站的抓取数据。使用我们可靠的网页抓取 API 列表，取代手动操作，实现可扩展的站点发现。

开始免费试用
联系销售

使用 Details of runs Scraper API 抓取工具能做什么？

使用所有网站列表和网站列表数据创建全面的网页目录。通过提取网站所有页面列表进行站点审计，用于 SEO 分析。利用运行爬虫功能、网站所有页面的详细抓取器以及站点列表，开发竞争情报工具，动态跟踪在线存在。

XCrawl

即时站点列表

即时检索结构化 JSON 数据集，用于所有网站列表和在线网站列表，支持快速构建分析平台的数据集。

XCrawl

完整页面爬取

运行爬虫系统地列出网站所有页面，捕获深层链接和元数据，具有高精度和最小延迟。

XCrawl

可扩展抓取 API

使用网页抓取 API 端点为您的应用提供动力，支持高容量最佳网站列表和网站列表提取。

XCrawl

丰富的爬虫数据

访问详细抓取器和网页爬虫列表的详细 JSON 字段，完美适用于高级网站抓取数据集成。

受全球数据驱动团队信赖

被分析、研究、监控和增长等领域的团队广泛使用。

XCrawl

可用的 Details of runs Scraper API 抓取器

访问最常用的 Details of runs Scraper API 数据类型——完全结构化、格式一致、可直接用于生产。

List of All Websites

全面端点，从目录和索引抓取所有网站列表，实现广泛的网页覆盖。

抓取方式：
  • domain
  • url
  • title
  • category
  • popularity_score
  • first_indexed
  • tech_stack

List All Pages of a Website

高级爬虫，动态提取网站所有页面，包括站点地图和内部链接。

抓取方式：
  • page_url
  • title
  • depth_level
  • content_type
  • last_modified
  • internal_links
  • word_count
  • status_code

List of Best Websites

精选抓取器，按权威性、交通量和细分领域相关性排名最佳网站列表。

抓取方式：
  • rank
  • domain
  • niche
  • traffic_estimate
  • authority_score
  • backlinks
  • country

List of Sites

快速端点，从搜索和类别交付站点列表，用于针对性集合。

抓取方式：
  • site_url
  • description
  • tags
  • status
  • crawl_date
  • size_estimate

Run Crawler

启动自定义运行爬虫作业，按需构建网站列表或抓取特定域。

抓取方式：
  • run_id
  • status
  • start_time
  • end_time
  • pages_crawled
  • errors_count
  • data_volume

Detail Scraper

深入详细抓取器，用于带完整元数据和结构化提取的网站抓取数据。

抓取方式：
  • detail_url
  • metadata
  • structured_data
  • images
  • external_links
  • text_content
  • html_snippet

Details of runs Scraper API 爬取方法

XCrawl

API 抓取（开发者专用）

通过 REST 端点无缝集成 Runs Scraper API，程序化访问所有网站列表并运行爬虫。

  • XCrawl
    RESTful 端点
    简单 HTTP 调用端点，如网站所有页面列表，即时获取结构化响应。
  • XCrawl
    即用 JSON 解析
    来自网站列表和详细抓取器的干净嵌套 JSON 输出，便于数据处理。
  • XCrawl
    高容量扩展
    异步兼容设计，支持大规模站点列表和运行爬虫操作，无停机时间。
XCrawl

无代码抓取（运营与增长团队专用）

利用直观仪表板配置并启动抓取器，针对最佳网站列表，无需编码。

  • XCrawl
    可视化选择器
    点击式界面，构建网站所有页面列表或在线网站列表抓取器。
  • XCrawl
    作业调度
    自动化运行爬虫任务，用于定期网站列表更新和监控。
  • XCrawl
    轻松导出
    从仪表板直接下载网站抓取数据为 CSV、JSON 或 Excel。

代码示例

通过简单的 API 调用，在几秒内获取 Details of runs Scraper API 帖子和作者信息。

输入
Shell
curl -X POST https://xcrawl.com -H "Authorization: YOU_TOKEN" -H "Content-Type: application/json" -d "{\"geo\":\"US\",\"context\":{\"keyword_list\":[{\"keyword\":\"Apple\"}],\"start_page\":1,\"pages\":1},\"source\":\"amazon_search\"}"
输出
Json
{
"result":[
{
"content":{
"url":"https://www.amazon.com/s?k=Apple&page=1"
"page":1
"query":"Apple"
"results":{
"organic":[
{
"pos":1
"url":"https://www.amazon.com/sspa/click?ie=UTF8&spc=MTo1NTU4MDIyNzE4MTQ0NDk1OjE3NjM0NDg1NjM6c3BfYXRmOjMwMDg0MTIyMDE1MTYwMjo6MDo6&url=%2FApple-11-inch-Intelligence-Display-All-Day%2Fdp%2FB0DZ73HCJZ%2Fref%3Dsr_1_1_sspa%3Fdib%3DeyJ2IjoiMSJ9.34Y5eLJt-Syg--Dpi7ueLQwL3ml5AvPfvC0eh7LK2pKhXumC_HQT9LBvkLBiFSrOLyabiwA1DN0qC4nDUFqkGrn5VUhsdLQFYgZ3L8DIPuzIgdPdKtqxJq8diyjiiuXTCDm8kcQmj2lflrdB1g_13fvuEjweGI5mAVZVfJ83S_reyt11VBul7Fga7znbDIGVuFDGhy2lICifAICisiNT88x1w5OOasbBiPs42bcbX0Y.sYUV92XFy8V256YhUSF1FPnMdd_kkjo8lMeGBX4Y2Rs%26dib_tag%3Dse%26keywords%3DApple%26qid%3D1763448563%26sr%3D8-1-spons%26sp_csd%3Dd2lkZ2V0TmFtZT1zcF9hdGY%26psc%3D1"
"asin":"B0DZ73HCJZ"
"price":499.99
"title":"SponsoredSponsored You’re seeing this ad based on the product’s relevance to your search query.Leave ad feedback AppleiPad Air 11-inch with M3 chip Built for Apple Intelligence, Liquid Retina Display, 128GB, 12MP Front/Back Camera, Wi-Fi 6E, Touch ID, All-Day Battery Life — Purple"
"rating":4.8
"currency":"USD"
"is_prime":false
"url_image":"https://m.media-amazon.com/images/I/71b-vc2xzlL._AC_UY218_.jpg"
"best_seller":false
"price_upper":499.99
"is_sponsored":false
"sales_volume":"1K+ bought in past month"
"pricing_count":1
"reviews_count":null
"is_amazons_choice":false
"price_strikethrough":599
"shipping_information":"FREE delivery Sun, Nov 23Or fastest delivery Tomorrow, Nov 19"
},
{
"pos":2
"url":"https://www.amazon.com/sspa/click?ie=UTF8&spc=MTo1NTU4MDIyNzE4MTQ0NDk1OjE3NjM0NDg1NjM6c3BfYXRmOjMwMDg0MTI5NzA2MjkwMjo6MDo6&url=%2FApple-Bluetooth-Headphones-Personalized-Effortless%2Fdp%2FB0DGHMNQ5Z%2Fref%3Dsr_1_2_sspa%3Fdib%3DeyJ2IjoiMSJ9.34Y5eLJt-Syg--Dpi7ueLQwL3ml5AvPfvC0eh7LK2pKhXumC_HQT9LBvkLBiFSrOLyabiwA1DN0qC4nDUFqkGrn5VUhsdLQFYgZ3L8DIPuzIgdPdKtqxJq8diyjiiuXTCDm8kcQmj2lflrdB1g_13fvuEjweGI5mAVZVfJ83S_reyt11VBul7Fga7znbDIGVuFDGhy2lICifAICisiNT88x1w5OOasbBiPs42bcbX0Y.sYUV92XFy8V256YhUSF1FPnMdd_kkjo8lMeGBX4Y2Rs%26dib_tag%3Dse%26keywords%3DApple%26qid%3D1763448563%26sr%3D8-2-spons%26sp_csd%3Dd2lkZ2V0TmFtZT1zcF9hdGY%26psc%3D1"
"asin":"B0DGHMNQ5Z"
"price":117
"title":"SponsoredSponsored You’re seeing this ad based on the product’s relevance to your search query.Leave ad feedback AppleAirPods 4 Wireless Earbuds, Bluetooth Headphones, Personalized Spatial Audio, Sweat and Water Resistant, USB-C Charging Case, H2 Chip, Up to 30 Hours of Battery Life, Effortless Setup for iPhone"
"rating":4.5
"currency":"USD"
"is_prime":false
"url_image":"https://m.media-amazon.com/images/I/61iBtxCUabL._AC_UY218_.jpg"
"best_seller":false
"price_upper":117
"is_sponsored":false
"sales_volume":"10K+ bought in past month"
"pricing_count":1
"reviews_count":null
"is_amazons_choice":false
"price_strikethrough":129
"shipping_information":"FREE delivery Sun, Nov 23Or fastest delivery Tomorrow, Nov 19"
},
{
"pos":3
"url":"https://www.amazon.com/Apple-MX542LL-A-AirTag-Pack/dp/B0D54JZTHY/ref=sr_1_3?dib=eyJ2IjoiMSJ9.34Y5eLJt-Syg--Dpi7ueLQwL3ml5AvPfvC0eh7LK2pKhXumC_HQT9LBvkLBiFSrOLyabiwA1DN0qC4nDUFqkGrn5VUhsdLQFYgZ3L8DIPuzIgdPdKtqxJq8diyjiiuXTCDm8kcQmj2lflrdB1g_13fvuEjweGI5mAVZVfJ83S_reyt11VBul7Fga7znbDIGVuFDGhy2lICifAICisiNT88x1w5OOasbBiPs42bcbX0Y.sYUV92XFy8V256YhUSF1FPnMdd_kkjo8lMeGBX4Y2Rs&dib_tag=se&keywords=Apple&qid=1763448563&sr=8-3"
"asin":"B0D54JZTHY"
"price":79.98
"title":"AppleAirTag 4 Pack. Keep Track of and find Your Keys, Wallet, Luggage, Backpack, and More. Simple one-tap Set up with iPhone or iPad"
"rating":4.7
"currency":"USD"
"is_prime":false
"url_image":"https://m.media-amazon.com/images/I/61bMNCeAUAL._AC_UY218_.jpg"
"best_seller":false
"price_upper":79.98
"is_sponsored":false
"sales_volume":"10K+ bought in past month"
"pricing_count":1
"reviews_count":null
"is_amazons_choice":false
"price_strikethrough":99
"shipping_information":"FREE delivery Sun, Nov 23Or fastest delivery Tomorrow, Nov 19"
},
{
"pos":4
"url":"https://www.amazon.com/Apple-MX532LL-A-AirTag/dp/B0CWXNS552/ref=sr_1_4?dib=eyJ2IjoiMSJ9.34Y5eLJt-Syg--Dpi7ueLQwL3ml5AvPfvC0eh7LK2pKhXumC_HQT9LBvkLBiFSrOLyabiwA1DN0qC4nDUFqkGrn5VUhsdLQFYgZ3L8DIPuzIgdPdKtqxJq8diyjiiuXTCDm8kcQmj2lflrdB1g_13fvuEjweGI5mAVZVfJ83S_reyt11VBul7Fga7znbDIGVuFDGhy2lICifAICisiNT88x1w5OOasbBiPs42bcbX0Y.sYUV92XFy8V256YhUSF1FPnMdd_kkjo8lMeGBX4Y2Rs&dib_tag=se&keywords=Apple&qid=1763448563&sr=8-4"
"asin":"B0CWXNS552"
"price":17.97
"title":"AppleAirTag. Keep Track of and find Your Keys, Wallet, Luggage, Backpack, and More. Simple one-tap Set up with iPhone or iPad"
"rating":4.7
"currency":"USD"
"is_prime":false
"url_image":"https://m.media-amazon.com/images/I/71rP7f78eFL._AC_UY218_.jpg"
"best_seller":false
"price_upper":17.97
"is_sponsored":false
"sales_volume":"10K+ bought in past month"
"pricing_count":1
"reviews_count":null
"is_amazons_choice":false
"price_strikethrough":29
"shipping_information":"FREE delivery Sun, Nov 23 on $35 of items shipped by AmazonOr fastest delivery Tomorrow, Nov 19"
},
{
"pos":5
"url":"https://www.amazon.com/Apple-iPad-Pro-13-inch-M5/dp/B0FWCXMR3W/ref=sr_1_5?dib=eyJ2IjoiMSJ9.34Y5eLJt-Syg--Dpi7ueLQwL3ml5AvPfvC0eh7LK2pKhXumC_HQT9LBvkLBiFSrOLyabiwA1DN0qC4nDUFqkGrn5VUhsdLQFYgZ3L8DIPuzIgdPdKtqxJq8diyjiiuXTCDm8kcQmj2lflrdB1g_13fvuEjweGI5mAVZVfJ83S_reyt11VBul7Fga7znbDIGVuFDGhy2lICifAICisiNT88x1w5OOasbBiPs42bcbX0Y.sYUV92XFy8V256YhUSF1FPnMdd_kkjo8lMeGBX4Y2Rs&dib_tag=se&keywords=Apple&qid=1763448563&sr=8-5"
"asin":"B0FWCXMR3W"
"price":2499
"title":"AppleiPad Pro 13-inch (M5): Ultra Retina XDR Display, 2TB, 12MP Front/Back Camera, LiDAR Scanner, Wi-Fi 7 with Apple N1 + 5G Cellular with C1X chip, Face ID, All-Day Battery Life — Space Black"
"rating":4.6
"currency":"USD"
"is_prime":false
"url_image":"https://m.media-amazon.com/images/I/715V3wbnD6L._AC_UY218_.jpg"
"best_seller":false
"price_upper":2499
"is_sponsored":false
"sales_volume":null
"pricing_count":1
"reviews_count":16
"is_amazons_choice":false
"price_strikethrough":""
"shipping_information":"FREE delivery Sun, Nov 23Or fastest delivery Thu, Nov 20"
},
{
"pos":6
"url":"https://www.amazon.com/Apple-Cancellation-Translation-Headphones-High-Fidelity/dp/B0FQFB8FMG/ref=sr_1_6?dib=eyJ2IjoiMSJ9.34Y5eLJt-Syg--Dpi7ueLQwL3ml5AvPfvC0eh7LK2pKhXumC_HQT9LBvkLBiFSrOLyabiwA1DN0qC4nDUFqkGrn5VUhsdLQFYgZ3L8DIPuzIgdPdKtqxJq8diyjiiuXTCDm8kcQmj2lflrdB1g_13fvuEjweGI5mAVZVfJ83S_reyt11VBul7Fga7znbDIGVuFDGhy2lICifAICisiNT88x1w5OOasbBiPs42bcbX0Y.sYUV92XFy8V256YhUSF1FPnMdd_kkjo8lMeGBX4Y2Rs&dib_tag=se&keywords=Apple&qid=1763448563&sr=8-6"
"asin":"B0FQFB8FMG"
"price":249
"title":"AppleAirPods Pro 3 Wireless Earbuds, Active Noise Cancellation, Live Translation, Heart Rate Sensing, Hearing Aid Feature, Bluetooth Headphones, Spatial Audio, High-Fidelity Sound, USB-C Charging"
"rating":4.4
"currency":"USD"
"is_prime":false
"url_image":"https://m.media-amazon.com/images/I/61solmQSSlL._AC_UY218_.jpg"
"best_seller":false
"price_upper":249
"is_sponsored":false
"sales_volume":"10K+ bought in past month"
"pricing_count":1
"reviews_count":null
"is_amazons_choice":false
"price_strikethrough":""
"shipping_information":"FREE delivery Sun, Nov 23Or fastest delivery Tomorrow, Nov 19"
},
{
"pos":7
"url":"https://www.amazon.com/Apple-2025-MacBook-13-inch-Laptop/dp/B0DZD9S5GC/ref=sr_1_7?dib=eyJ2IjoiMSJ9.34Y5eLJt-Syg--Dpi7ueLQwL3ml5AvPfvC0eh7LK2pKhXumC_HQT9LBvkLBiFSrOLyabiwA1DN0qC4nDUFqkGrn5VUhsdLQFYgZ3L8DIPuzIgdPdKtqxJq8diyjiiuXTCDm8kcQmj2lflrdB1g_13fvuEjweGI5mAVZVfJ83S_reyt11VBul7Fga7znbDIGVuFDGhy2lICifAICisiNT88x1w5OOasbBiPs42bcbX0Y.sYUV92XFy8V256YhUSF1FPnMdd_kkjo8lMeGBX4Y2Rs&dib_tag=se&keywords=Apple&qid=1763448563&sr=8-7"
"asin":"B0DZD9S5GC"
"price":749.99
"title":"Apple2025 MacBook Air 13-inch Laptop with M4 chip: Built for Apple Intelligence, 13.6-inch Liquid Retina Display, 16GB Unified Memory, 256GB SSD Storage, 12MP Center Stage Camera, Touch ID; Midnight"
"rating":4.8
"currency":"USD"
"is_prime":false
"url_image":"https://m.media-amazon.com/images/I/71cWZUr9SVL._AC_UY218_.jpg"
"best_seller":false
"price_upper":749.99
"is_sponsored":false
"sales_volume":null
"pricing_count":1
"reviews_count":null
"is_amazons_choice":false
"price_strikethrough":999
"shipping_information":"FREE delivery Sun, Nov 23Or fastest delivery Tomorrow, Nov 19"
},
{
"pos":8
"url":"https://www.amazon.com/Apple-Headphones-Cancellation-Transparency-Personalized/dp/B0DGJ7HYG1/ref=sr_1_8?dib=eyJ2IjoiMSJ9.34Y5eLJt-Syg--Dpi7ueLQwL3ml5AvPfvC0eh7LK2pKhXumC_HQT9LBvkLBiFSrOLyabiwA1DN0qC4nDUFqkGrn5VUhsdLQFYgZ3L8DIPuzIgdPdKtqxJq8diyjiiuXTCDm8kcQmj2lflrdB1g_13fvuEjweGI5mAVZVfJ83S_reyt11VBul7Fga7znbDIGVuFDGhy2lICifAICisiNT88x1w5OOasbBiPs42bcbX0Y.sYUV92XFy8V256YhUSF1FPnMdd_kkjo8lMeGBX4Y2Rs&dib_tag=se&keywords=Apple&qid=1763448563&sr=8-8"
"asin":"B0DGJ7HYG1"
"price":148.99
"title":"AppleAirPods 4 Wireless Earbuds, Bluetooth Headphones, with Active Noise Cancellation, Adaptive Audio, Transparency Mode, Personalized Spatial Audio, USB-C Charging Case, Wireless Charging, H2 Chip"
"rating":4.5
"currency":"USD"
"is_prime":false
"url_image":"https://m.media-amazon.com/images/I/61iBtxCUabL._AC_UY218_.jpg"
"best_seller":false
"price_upper":148.99
"is_sponsored":false
"sales_volume":"10K+ bought in past month"
"pricing_count":1
"reviews_count":null
"is_amazons_choice":false
"price_strikethrough":179
"shipping_information":"FREE delivery Sun, Nov 23Or fastest delivery Tomorrow, Nov 19"
},
],
"amazons_choices":[
],
},
},
},
],
},

Details of runs Scraper API 抓取 API 如何工作？

  • XCrawl智能 IP 轮换
  • XCrawl自动验证码识别
  • XCrawlHTTP 请求头
  • XCrawl自动网页解析
  • XCrawl可定制化支持

API 能为您做什么？

XCrawl

代理管理

基于机器学习的代理选择与轮换，使用覆盖 190 个国家的高级代理池。

XCrawl

AI 驱动的指纹伪装

独特的 HTTP Header、JavaScript 与浏览器指纹，使系统更能适应动态内容。

XCrawl

验证码绕过

自动重试与验证码绕过，保证数据持续获取。

XCrawl

批量数据采集

一次从多个页面提取数据，每批可处理最多 1 万个 URL。

XCrawl

多种数据交付方式

可通过 SFTP、AWS S3 等云存储接收数据，或通过 API 获取结果。

XCrawl

定时采集

设置自动化采集频率，数据可直接交付至您的云存储。

XCrawl

免维护基础设施

无需维护代理或构建采集系统，减少工程负担。

XCrawl

高扩展性

易于集成并支持定制化。

XCrawl

24/7 支持

如有任何问题，可随时获得专业支持。

XCrawl 透明

灵活定价

透明的网页爬取定价，灵活的 API 订阅计划。比较数据提取成本，购买爬虫访问权限，免费开始 — 随业务增长而扩展。

月度
年度 热门
我们接受以下支付方式：XCrawl ...

扩展套餐

为需要更强大功能和专属支持的团队提供的高容量套餐。

享受更高的速率限制、更多并发浏览器和优先支持。

联系销售
我们提供企业级定制服务

探索更多解决方案

T
Twitter Replies Scraper API

XCrawl 的 Twitter Replies Scraper API 是后端开发者的终极 twitter scraper api，可实现线程回复、对话和互动指标的无缝 twitter scraping，无速率限制或封禁风险。借助我们健壮的 twitter scraping api，轻而易举绕过解析复杂性和 IP 封锁，为大规模 twitter data scraping 交付纯净的 JSON 数据。

了解更多
L
Linkedin Jobs Scraper API

XCrawl 的 Linkedin Jobs Scraper API 是后端开发者的终极 linkedin scraper 和 linkedin api 替代方案。轻松抓取 linkedin job postings，克服反机器人措施、IP 封锁以及复杂解析挑战，从 linkedin scraping 任务中提供干净、结构化的 JSON 数据。

了解更多
N
Nordstrom Scraper API

使用 XCrawl's Nordstrom Scraper API 解锁 Nordstrom 丰富的产品目录。轻松提取产品详情、定价、评论和图像，而无需应对 CAPTCHA 阻挡、IP 封禁或复杂解析。通过简单的 REST 端点获取干净的 JSON 数据，完美适用于后端开发者构建可扩展的 nordstrom api 集成。

了解更多
I
Instagram Content Intelligence Pro Scraper API

利用我们 Instagram Content Intelligence Pro Scraper API 的强大功能，轻而易举地抓取 Instagram 数据。此 instagram scraper api 可绕过反机器人措施、处理速率限制，并从用户资料、帖子、评论和互动指标中提供结构化的 JSON。完美适用于开发人员构建 instagram scraping tools 或 python instagram scraper 集成，而无需麻烦。

了解更多
G
Google News Scrapper - Fast And Cheap (Pay Per Result) Scraper API

使用 XCrawl 的 Google News Scrapper 解锁实时 Google News 数据 - 快速且廉价（Pay Per Result）Scraper API。绕过 IP 封锁和解析复杂性，轻而易举地抓取 google news results。适合寻求可靠 google news scraper API 的开发者，从 google news scraping 查询中交付结构化 JSON，无需代理或 CAPTCHA 的麻烦。

了解更多
G
G2 Search Scraper | Fast & Reliable | $7 / 1k Scraper API

XCrawl 的 G2 Search Scraper API 是后端开发者的终极 g2 scraper 和 g2 api。使用我们的 fast crawler 和 fast extract 技术轻松抓取 g2 data，绕过速率限制和解析复杂性。只需 $7 每 1k 请求，即可可靠获取 G2 产品、评论和搜索结果的结构化 JSON。

了解更多
查看更多

我们的客户怎么说？

★★★★★
5.0

所有网站列表端点彻底改变了我们的目录构建。抓取速度快，数据集质量一流！

Alex Rivera
Alex Rivera
CTO, DirectoryPro
★★★★★
4.9

网站所有页面列表在审计中运行完美。轻松集成我们的网页抓取 API。

Sarah Kim
Sarah Kim
Data Engineer, WebInsights
★★★★★
5.0

运行爬虫功能是网站列表的变革者。每次都准确且可扩展。

Mike Chen
Mike Chen
Founder, CrawlTools
★★★★★
4.8

最佳网站列表数据提升了我们的排名。详细抓取器提供精确的网站抓取数据。

Emma Lopez
Emma Lopez
SEO Analyst, RankBoost
★★★★★
5.0

网站所有页面抓取无缝可靠。适用于我们所有项目的站点列表。

David Patel
David Patel
DevOps Lead, SiteMap Inc.
★★★★★
4.9

喜欢网页爬虫列表目录。运行爬虫作业提供快速、易集成的体验。

Lisa Wong
Lisa Wong
Product Manager, DataHive
★★★★★
5.0

网站列表端点极其高效。完美适用于构建在线网站列表工具。

Tom Harris
Tom Harris
Backend Developer, WebListr
★★★★★
4.7

详细抓取器轻松处理复杂站点。非常适合所有网站列表监控。

Nina Gupta
Nina Gupta
Growth Hacker, Competify
★★★★★
5.0

站点列表和最佳网站列表数据精准无误。强烈推荐此抓取器。

Raj Singh
Raj Singh
Analytics Director, Insightly
★★★★★
4.9

网站抓取数据从未如此简单。网页爬虫列表功能是瑰宝。

Claire Dubois
Claire Dubois
Full-Stack Engineer, CrawlNet
★★★★★
5.0

所有网站列表端点彻底改变了我们的目录构建。抓取速度快，数据集质量一流！

Alex Rivera
Alex Rivera
CTO, DirectoryPro
★★★★★
4.9

网站所有页面列表在审计中运行完美。轻松集成我们的网页抓取 API。

Sarah Kim
Sarah Kim
Data Engineer, WebInsights
★★★★★
5.0

运行爬虫功能是网站列表的变革者。每次都准确且可扩展。

Mike Chen
Mike Chen
Founder, CrawlTools
★★★★★
4.8

最佳网站列表数据提升了我们的排名。详细抓取器提供精确的网站抓取数据。

Emma Lopez
Emma Lopez
SEO Analyst, RankBoost
★★★★★
5.0

网站所有页面抓取无缝可靠。适用于我们所有项目的站点列表。

David Patel
David Patel
DevOps Lead, SiteMap Inc.
★★★★★
4.9

喜欢网页爬虫列表目录。运行爬虫作业提供快速、易集成的体验。

Lisa Wong
Lisa Wong
Product Manager, DataHive
★★★★★
5.0

网站列表端点极其高效。完美适用于构建在线网站列表工具。

Tom Harris
Tom Harris
Backend Developer, WebListr
★★★★★
4.7

详细抓取器轻松处理复杂站点。非常适合所有网站列表监控。

Nina Gupta
Nina Gupta
Growth Hacker, Competify
★★★★★
5.0

站点列表和最佳网站列表数据精准无误。强烈推荐此抓取器。

Raj Singh
Raj Singh
Analytics Director, Insightly
★★★★★
4.9

网站抓取数据从未如此简单。网页爬虫列表功能是瑰宝。

Claire Dubois
Claire Dubois
Full-Stack Engineer, CrawlNet
★★★★★
5.0

所有网站列表端点彻底改变了我们的目录构建。抓取速度快，数据集质量一流！

Alex Rivera
Alex Rivera
CTO, DirectoryPro
★★★★★
4.9

网站所有页面列表在审计中运行完美。轻松集成我们的网页抓取 API。

Sarah Kim
Sarah Kim
Data Engineer, WebInsights
★★★★★
5.0

运行爬虫功能是网站列表的变革者。每次都准确且可扩展。

Mike Chen
Mike Chen
Founder, CrawlTools
★★★★★
4.8

最佳网站列表数据提升了我们的排名。详细抓取器提供精确的网站抓取数据。

Emma Lopez
Emma Lopez
SEO Analyst, RankBoost
★★★★★
5.0

网站所有页面抓取无缝可靠。适用于我们所有项目的站点列表。

David Patel
David Patel
DevOps Lead, SiteMap Inc.
★★★★★
4.9

喜欢网页爬虫列表目录。运行爬虫作业提供快速、易集成的体验。

Lisa Wong
Lisa Wong
Product Manager, DataHive
★★★★★
5.0

网站列表端点极其高效。完美适用于构建在线网站列表工具。

Tom Harris
Tom Harris
Backend Developer, WebListr
★★★★★
4.7

详细抓取器轻松处理复杂站点。非常适合所有网站列表监控。

Nina Gupta
Nina Gupta
Growth Hacker, Competify
★★★★★
5.0

站点列表和最佳网站列表数据精准无误。强烈推荐此抓取器。

Raj Singh
Raj Singh
Analytics Director, Insightly
★★★★★
4.9

网站抓取数据从未如此简单。网页爬虫列表功能是瑰宝。

Claire Dubois
Claire Dubois
Full-Stack Engineer, CrawlNet
★★★★★
5.0

所有网站列表端点彻底改变了我们的目录构建。抓取速度快，数据集质量一流！

Alex Rivera
Alex Rivera
CTO, DirectoryPro
★★★★★
4.9

网站所有页面列表在审计中运行完美。轻松集成我们的网页抓取 API。

Sarah Kim
Sarah Kim
Data Engineer, WebInsights
★★★★★
5.0

运行爬虫功能是网站列表的变革者。每次都准确且可扩展。

Mike Chen
Mike Chen
Founder, CrawlTools
★★★★★
4.8

最佳网站列表数据提升了我们的排名。详细抓取器提供精确的网站抓取数据。

Emma Lopez
Emma Lopez
SEO Analyst, RankBoost
★★★★★
5.0

网站所有页面抓取无缝可靠。适用于我们所有项目的站点列表。

David Patel
David Patel
DevOps Lead, SiteMap Inc.
★★★★★
4.9

喜欢网页爬虫列表目录。运行爬虫作业提供快速、易集成的体验。

Lisa Wong
Lisa Wong
Product Manager, DataHive
★★★★★
5.0

网站列表端点极其高效。完美适用于构建在线网站列表工具。

Tom Harris
Tom Harris
Backend Developer, WebListr
★★★★★
4.7

详细抓取器轻松处理复杂站点。非常适合所有网站列表监控。

Nina Gupta
Nina Gupta
Growth Hacker, Competify
★★★★★
5.0

站点列表和最佳网站列表数据精准无误。强烈推荐此抓取器。

Raj Singh
Raj Singh
Analytics Director, Insightly
★★★★★
4.9

网站抓取数据从未如此简单。网页爬虫列表功能是瑰宝。

Claire Dubois
Claire Dubois
Full-Stack Engineer, CrawlNet
ISO 27001
XCrawlISO 27001
GDPR
XCrawlGDPR
用户高评价
XCrawl用户高评价
行业领导者
XCrawl行业领导者
最易使用奖
XCrawl最易使用奖
最佳价值奖
XCrawl最佳价值奖

常见问题

了解关于 XCrawl 的一切信息。

Runs Scraper API 的架构如何工作？
由分布式爬虫驱动，处理运行爬虫作业请求，获取所有网站列表或网站所有页面列表，并通过 REST API 返回结构化 JSON。
定价模型由哪些因素决定？
定价根据 API 调用次数、每次运行爬虫作业的爬取页面数、网站列表数据量以及高级功能（如优先最佳网站列表访问）进行扩展。
数据覆盖范围和限制是什么？
站点列表、网站所有页面以及网站抓取数据的广泛覆盖，但取决于公开可访问性和站点变更；不包括私有内容。
此抓取 API 合法且合规吗？
严格仅限公共数据；始终遵守 robots.txt、速率限制，并要求用户遵守目标站点的服务条款。
有哪些集成和支持选项？
全面文档、网页抓取 API 代码示例、社区论坛，以及运行爬虫和详细抓取器设置的优先支持。

获取你所需的数据。

让我们负责数据采集，你专注于核心工作。

免费开始
XCrawl客户支持：support@xcrawl.com
XCrawl简体中文
English简体中文GermanFrançaisРусский日本語한국어
安全合规
XCrawl
XCrawlXCrawl