抓取技术与开发者站点
该分类下有 11 个站点,基于 August 2026 的 Crawlbase 流量测得。每个页面都给出可用的调用及其背后的数字。
搜索引擎与开发者平台,google.com、bing.com、leetcode.com 和 kaggle.com。搜索结果页是主要目标,在 Crawlbase 以 JSON 返回结果的地方,配方会给出 scraper 参数。 11 个站点中有 8 个响应普通令牌。价格从每页 1 积分 到 2 积分。
对 google.com 的调用成功率 97.0%。搜索结果,无需浏览器,响应中位时间 1.9s。
对 github.com 的调用成功率 94.5%。首页,仅在需要的路径使用浏览器,响应中位时间 1.6s。
如何从 bing.com 获取搜索结果:无需浏览器,成功率 90.5%,每页一次调用。
对 baidu.com 的调用成功率 99.9%。搜索结果,无需浏览器,响应中位时间 2.3s。
对 duckduckgo.com 的调用成功率 95.9%。页面,无需浏览器,响应中位时间 2.1s。
如何从 klaviyo.com 获取页面:无需浏览器,成功率 97.8%,每页一次调用。
Leetcode.com 的页面:无需浏览器,Aug 2026 成功率 100%。
对 kaggle.com 的调用成功率 99.9%。页面,无需浏览器,响应中位时间 903ms。
对 ietf.org 的调用成功率 95.8%。doc 页面,仅在需要的路径使用浏览器,响应中位时间 7.5s。
Brave.com 的搜索结果:无需浏览器,Aug 2026 成功率 99.6%。
对 getrecharge.com 的调用成功率 99.7%。docs 页面,JavaScript 令牌,响应中位时间 3.7s。