抓取电商站点
该分类下有 20 个站点,基于 August 2026 的 Crawlbase 流量测得。每个页面都给出可用的调用及其背后的数字。
拥有大型目录的综合零售商,包括 walmart.com、target.com、kohls.com 和 sears.com。反爬等级在这里集中:多个站点的定价高于标准等级,约一半的搜索页和类目页需要 JavaScript 令牌。 20 个站点中有 9 个响应普通令牌。价格从每页 1 积分 到 4.5 积分。
可用的调用、关键参数、可获取的字段以及会出错的地方。
对 walmart.com 的调用成功率 92.1%。商品页,JavaScript 令牌,响应中位时间 12.2s。
如何从 target.com 获取商品页:无需浏览器,成功率 96.4%,每页一次调用。
Costco.com 的商品页:JavaScript 令牌,Aug 2026 成功率 90.8%。
如何从 staples.com 获取商品页:无需浏览器,成功率 92.9%,每页一次调用。
对 macys.com 的调用成功率 94.0%。分类页,JavaScript 令牌,响应中位时间 15.2s。
Lego.com 的分类页:无需浏览器, DE 出口,Aug 2026 成功率 94.9%。
Woolworths.co.za 的商品页:无需浏览器,Aug 2026 成功率 99.9%。
Elcorteingles.es 的商品页:JavaScript 令牌, ES 出口,Aug 2026 成功率 93.0%。
如何从 sears.com 获取商品页:JavaScript 令牌, US 出口,成功率 94.2%,每页一次调用。
如何从 jcpenney.com 获取商品页:无需浏览器, US 出口,成功率 94.1%,每页一次调用。
如何从 action.com 获取商品页:无需浏览器,成功率 92.5%,每页一次调用。
对 officeworks.com.au 的调用成功率 96.3%。分类页,JavaScript 令牌,响应中位时间 10.6s。
对 dillards.com 的调用成功率 99.8%。pages 页面,无需浏览器,响应中位时间 1.1s。
对 jomashop.com 的调用成功率 97.6%。搜索结果,JavaScript 令牌,响应中位时间 16.0s。
如何从 waltons.co.za 获取buy 页面:无需浏览器,成功率 98.2%,每页一次调用。
如何从 harrods.com 获取商品页:无需浏览器,成功率 95.6%,每页一次调用。
如何从 jacksonsart.com 获取商品页:仅在需要的路径使用浏览器,成功率 97.6%,每页一次调用。
Cassart.co.uk 的商品页:无需浏览器,Aug 2026 成功率 99.8%。
对 myer.com.au 的调用成功率 99.9%。分类页,无需浏览器,响应中位时间 2.1s。