电商抓取器 · Crawlbase 文档

概述

电商类目涵盖了大多数团队用于价格情报、目录丰富化、竞争对手监测和广告归因分析的市场。每个抓取器都接受一个目标 URL，在毫秒级返回解析后的 JSON，并使用与 Crawling API 相同的住宅代理和反爬虫绕过技术 - 相同的正常运行时间 SLA、相同的单 token 认证，无需为每个目标单独配置。

按您所需的页面类型选择抓取器：商品详情页、搜索结果（SERP）、类目/部门信息流、卖家/商家店铺页、报价列表，或评论串。每个抓取器仅针对单一页面类型，因此即便底层 HTML 发生变化，JSON 结构也能保持稳定 - 而且您只需为成功的响应付费，因此针对不稳定上游的重试不会出现在您的账单上。

常见的处理流程：

价格监控：每日轮询 amazon-product-details / walmart-product-details，对 price 和 availability 进行快照，并在出现 Δ 时告警。
竞争情报：将 amazon-serp 查询结果导入到一组 amazon-product-details 调用中。
目录丰富化：通过 *-product-details 抓取器为您自己的 SKU 补充品牌、图片和功能数据。
广告衡量：在活动启动前后监测 amazon-best-sellers / amazon-new-releases 的排名。

地理路由是自动的 - 在请求中传入 country=DE，您就会看到德国购物者所看到的内容（货币、本地化、区域可用性）。对于需要登录或会话绑定的页面，可以将抓取器与 cookies_session 搭配使用，以便在多次调用间复用同一住宅会话。

Amazon

六款抓取器覆盖了 Amazon 零售的全部页面类型 - 商品详情、搜索、报价列表、评论、畅销榜以及新发布信息流。支持按国家区分：传入 country=US / UK / DE 等参数即可访问对应区域店铺。

Amazon Product Details - 商品页面（标题、价格、评分、描述）。
Amazon SERP - Amazon 上的搜索结果页面。
Amazon Offer Listing - 提供某商品的所有卖家。
Amazon Product Reviews - 某商品的评论。
Amazon Best Sellers - 按类目划分的畅销榜排名。
Amazon New Releases - 按类目划分的新发布商品。

Walmart

Walmart.com 商品页面、搜索结果以及部门/类目信息流。当您需要追踪同一 SKU 在 Amazon 和 Walmart 之间的价格一致性时非常有用。

Walmart Product Details - Walmart 上的商品页面。
Walmart SERP - Walmart 上的搜索结果页面。
Walmart Category - 某部门/子部门下的商品。

eBay

eBay 商品列表、搜索结果以及卖家店铺页面。当您需要长期追踪某个特定转售商的目录而非固定商品时,卖家店铺抓取器是合适的选择。

eBay Product - 商品列表（价格、卖家、品相、运费）。
eBay SERP - eBay 上的搜索结果页面。
eBay Seller Shop - 单个卖家店铺中的所有商品列表。

AliExpress

跨境 AliExpress 抓取器 - 商品页面和搜索。与 country 搭配使用，可查看您所关注买家市场的本地化价格/运费。

AliExpress Product - AliExpress 上的商品页面。
AliExpress SERP - AliExpress 上的搜索结果页面。

Galaxus

面向瑞士市场的 Galaxus 和 Digitec 产品、搜索和评论抓取器。将 country 设置为 CH 以获得准确的价格和库存。

Galaxus Product - Galaxus 上的产品页面。
Galaxus SERP - Galaxus 上的搜索结果页面。
Galaxus Product Reviews - Galaxus 上某个产品的客户评论。

Best Buy

Best Buy 商品详情和搜索。是北美消费电子产品价格追踪的有力选择。

Best Buy Product Details - Best Buy 上的商品页面。
Best Buy SERP - Best Buy 上的搜索结果页面。

Google Shopping

Google Shopping 商品的商家报价 - 当您需要跨零售商的价格比较，又不想分别抓取每个零售商时非常有用。

Google Product Offers - Google Shopping 商品的商家报价。

TikTok Shop

TikTok Shop 商品列表 - 冲动消费类电商的快速增长渠道，尤其在亚太地区，并在美国市场持续扩张。

TikTok Shop - TikTok Shop 商品列表。

调用示例

下面是一次 amazon-product-details 调用。将 YOUR_TOKEN 替换为您的 Crawling API token；唯一必需的参数是目标 URL 和抓取器名称。

curl 'https://api.crawlbase.com/?token=YOUR_TOKEN' \
  --data-urlencode 'url=https://www.amazon.com/Apple-iPhone-Silicone-Case-MagSafe/dp/B0CHX2XFLN' \
  --data-urlencode 'scraper=amazon-product-details' -G

响应示例

{
  "name": "Apple iPhone Silicone Case with MagSafe",
  "asin": "B0CHX2XFLN",
  "brand": "Apple",
  "price": "$49.00",
  "availability": "In Stock",
  "rating": 4.7,
  "reviews_count": 12483,
  "main_image": "https://m.media-amazon.com/images/I/61MZi+B-OBL.jpg",
  "images": ["…"],
  "features": [
    "Designed by Apple to complement iPhone",
    "MagSafe-compatible attachment and alignment"
  ],
  "description": "Silicone exterior with a soft microfiber lining…",
  "categories": ["Cell Phones & Accessories", "Cases"]
}

完整参考（参数、全部 4 种 SDK 语言、边界情况）：Amazon Product Details - 完整参考

概述