电商
面向最大在线零售商和市场的十七款抓取器。选择一个站点,指向一个 URL,获取干净的结构化 JSON 而非 HTML。
概述
电商类目涵盖了大多数团队用于价格情报、目录丰富化、竞争对手监测和广告归因分析的市场。每个抓取器都接受一个目标 URL,在毫秒级返回解析后的 JSON,并使用与 Crawling API 相同的住宅代理和反爬虫绕过技术 - 相同的正常运行时间 SLA、相同的单 token 认证,无需为每个目标单独配置。
按您所需的页面类型选择抓取器:商品详情页、搜索结果(SERP)、类目/部门信息流、卖家/商家店铺页、报价列表,或评论串。每个抓取器仅针对单一页面类型,因此即便底层 HTML 发生变化,JSON 结构也能保持稳定 - 而且您只需为成功的响应付费,因此针对不稳定上游的重试不会出现在您的账单上。
常见的处理流程:
- 价格监控:每日轮询
amazon-product-details/walmart-product-details,对price和availability进行快照,并在出现 Δ 时告警。 - 竞争情报:将
amazon-serp查询结果导入到一组amazon-product-details调用中。 - 目录丰富化:通过
*-product-details抓取器为您自己的 SKU 补充品牌、图片和功能数据。 - 广告衡量:在活动启动前后监测
amazon-best-sellers/amazon-new-releases的排名。
地理路由是自动的 - 在请求中传入 country=DE,您就会看到德国购物者所看到的内容(货币、本地化、区域可用性)。对于需要登录或会话绑定的页面,可以将抓取器与 cookies_session 搭配使用,以便在多次调用间复用同一住宅会话。
Amazon
六款抓取器覆盖了 Amazon 零售的全部页面类型 - 商品详情、搜索、报价列表、评论、畅销榜以及新发布信息流。支持按国家区分:传入 country=US / UK / DE 等参数即可访问对应区域店铺。
- Amazon Product Details - 商品页面(标题、价格、评分、描述)。
- Amazon SERP - Amazon 上的搜索结果页面。
- Amazon Offer Listing - 提供某商品的所有卖家。
- Amazon Product Reviews - 某商品的评论。
- Amazon Best Sellers - 按类目划分的畅销榜排名。
- Amazon New Releases - 按类目划分的新发布商品。
Walmart
Walmart.com 商品页面、搜索结果以及部门/类目信息流。当您需要追踪同一 SKU 在 Amazon 和 Walmart 之间的价格一致性时非常有用。
- Walmart Product Details - Walmart 上的商品页面。
- Walmart SERP - Walmart 上的搜索结果页面。
- Walmart Category - 某部门/子部门下的商品。
eBay
eBay 商品列表、搜索结果以及卖家店铺页面。当您需要长期追踪某个特定转售商的目录而非固定商品时,卖家店铺抓取器是合适的选择。
- eBay Product - 商品列表(价格、卖家、品相、运费)。
- eBay SERP - eBay 上的搜索结果页面。
- eBay Seller Shop - 单个卖家店铺中的所有商品列表。
AliExpress
跨境 AliExpress 抓取器 - 商品页面和搜索。与 country 搭配使用,可查看您所关注买家市场的本地化价格/运费。
- AliExpress Product - AliExpress 上的商品页面。
- AliExpress SERP - AliExpress 上的搜索结果页面。
Galaxus
面向瑞士市场的 Galaxus 和 Digitec 产品、搜索和评论抓取器。将 country 设置为 CH 以获得准确的价格和库存。
- Galaxus Product - Galaxus 上的产品页面。
- Galaxus SERP - Galaxus 上的搜索结果页面。
- Galaxus Product Reviews - Galaxus 上某个产品的客户评论。
Best Buy
Best Buy 商品详情和搜索。是北美消费电子产品价格追踪的有力选择。
- Best Buy Product Details - Best Buy 上的商品页面。
- Best Buy SERP - Best Buy 上的搜索结果页面。
Google Shopping
Google Shopping 商品的商家报价 - 当您需要跨零售商的价格比较,又不想分别抓取每个零售商时非常有用。
- Google Product Offers - Google Shopping 商品的商家报价。
TikTok Shop
TikTok Shop 商品列表 - 冲动消费类电商的快速增长渠道,尤其在亚太地区,并在美国市场持续扩张。
- TikTok Shop - TikTok Shop 商品列表。
调用示例
下面是一次 amazon-product-details 调用。将 YOUR_TOKEN 替换为您的 Crawling API token;唯一必需的参数是目标 URL 和抓取器名称。
curl 'https://api.crawlbase.com/?token=YOUR_TOKEN' \
--data-urlencode 'url=https://www.amazon.com/Apple-iPhone-Silicone-Case-MagSafe/dp/B0CHX2XFLN' \
--data-urlencode 'scraper=amazon-product-details' -G响应示例
{
"name": "Apple iPhone Silicone Case with MagSafe",
"asin": "B0CHX2XFLN",
"brand": "Apple",
"price": "$49.00",
"availability": "In Stock",
"rating": 4.7,
"reviews_count": 12483,
"main_image": "https://m.media-amazon.com/images/I/61MZi+B-OBL.jpg",
"images": ["…"],
"features": [
"Designed by Apple to complement iPhone",
"MagSafe-compatible attachment and alignment"
],
"description": "Silicone exterior with a soft microfiber lining…",
"categories": ["Cell Phones & Accessories", "Cases"]
}完整参考(参数、全部 4 种 SDK 语言、边界情况):Amazon Product Details - 完整参考