实时 SDK 调用1.24M req/min流式传输
200zillow.com/homedetails/123JP70ms
200glassdoor.com/Reviews/googleUS144ms
200yelp.com/biz/blue-bottle-sfES148ms
200ebay.com/itm/195830173ES78ms
200ebay.com/itm/195830173SG172ms
200linkedin.com/in/williamhgatesUS133ms
200tripadvisor.com/Hotel_Review-g60763US138ms
200github.com/crawlbaseIN152ms
200indeed.com/viewjob?jk=8a1cGB60ms
200google.com/search?q=4k+tvSG114ms
200linkedin.com/in/williamhgatesES91ms
200etsy.com/listing/1029384BR75ms
404google.com/search?q=4k+tvBR79ms
404target.com/p/-/A-79348122JP185ms
200tripadvisor.com/Hotel_Review-g60763JP50ms
200walmart.com/ip/55088165JP96ms
301indeed.com/viewjob?jk=8a1cBR120ms
301zillow.com/homedetails/123FR82ms
301glassdoor.com/Reviews/googleES187ms
200google.com/search?q=4k+tvES175ms
200github.com/crawlbaseES41ms
200booking.com/hotel/fr/le-meuriceDE212ms
200producthunt.com/posts/notionCA108ms
200yelp.com/biz/blue-bottle-sfUS190ms
200stackoverflow.com/questions/11227809JP101ms
200indeed.com/viewjob?jk=8a1cES180ms
200zillow.com/homedetails/123JP70ms
200glassdoor.com/Reviews/googleUS144ms
200yelp.com/biz/blue-bottle-sfES148ms
200ebay.com/itm/195830173ES78ms
200ebay.com/itm/195830173SG172ms
200linkedin.com/in/williamhgatesUS133ms
200tripadvisor.com/Hotel_Review-g60763US138ms
200github.com/crawlbaseIN152ms
200indeed.com/viewjob?jk=8a1cGB60ms
200google.com/search?q=4k+tvSG114ms
200linkedin.com/in/williamhgatesES91ms
200etsy.com/listing/1029384BR75ms
404google.com/search?q=4k+tvBR79ms
404target.com/p/-/A-79348122JP185ms
200tripadvisor.com/Hotel_Review-g60763JP50ms
200walmart.com/ip/55088165JP96ms
301indeed.com/viewjob?jk=8a1cBR120ms
301zillow.com/homedetails/123FR82ms
301glassdoor.com/Reviews/googleES187ms
200google.com/search?q=4k+tvES175ms
200github.com/crawlbaseES41ms
200booking.com/hotel/fr/le-meuriceDE212ms
200producthunt.com/posts/notionCA108ms
200yelp.com/biz/blue-bottle-sfUS190ms
200stackoverflow.com/questions/11227809JP101ms
200indeed.com/viewjob?jk=8a1cES180ms
01 实时演示
同一次调用。选择你的语言。
一个客户端，实时输入。安装、用你的令牌初始化，然后开始抓取。每种语言都返回完全相同的 JSON。悬停可暂停并阅读。
几分钟内运行你的第一个请求。最多 10,000 次免费请求，无需信用卡。免费开始
02 库
官方 SDK，覆盖每种主流语言。
免费、开放且依赖精简。一行命令即可安装，用你的令牌初始化，然后从任何地方调用同一个 API。
Node.js
npm i crawlbase面向 Node 和 TypeScript 项目的即插即用客户端。
npm →Pythonpip install crawlbase在任意 Python 应用中安装并调用 Crawlbase 类。
PyPI →Rubygem install crawlbase一个无依赖的 gem，用于爬取和抓取。
RubyGems →PHPcomposer require crawlbase/crawlbase面向 Crawlbase API 的轻量级 PHP 包。
Packagist →Javacom.crawlbase:crawlbase-java-sdk-pom用于借助 Crawlbase 进行爬取和抓取的 Java SDK。
Maven →.NETdotnet add package CrawlbaseAPI通过 NuGet 将 Crawlbase API 集成到 .NET 项目中。
NuGet →Gogo get github.com/crawlbase/crawlbase-go面向 Crawling API 的精简 Go 客户端。
pkg.go.dev →Scrapypip install scrapy-crawlbase-middleware面向你的 Scrapy 爬虫的 Crawlbase 中间件。
PyPI →Zapier将 Crawlbase 接入无代码的 Zapier 工作流。
Zapier →任意语言curl https://api.crawlbase.com无需 SDK。从任何环境直接通过 HTTP 调用 REST API。
查看文档 →缺少某个？构建了一个库或想要合作？我们非常乐意与你携手。
联系我们 →03 工作原理
从安装到取得数据，只需四行。
易于部署，无论你是刚刚起步还是大规模运行。
01
选择你的语言
Node、Python、Ruby、PHP、Java、.NET 或 Go。或者跳过 SDK，直接使用普通 HTTP。
02
安装软件包
从你的注册表一行安装：npm、PyPI、RubyGems、Packagist、Maven、NuGet 或 go get。
03
用你的令牌初始化
使用你的某个 Crawlbase 令牌创建客户端。同一个令牌在任何地方都通用。
04
调用 API
传入任意 URL 以及 autoparse 或 screenshot 等参数，然后读取响应。
05 为什么选择 Crawlbase
一个客户端，整个平台。
这些 SDK 封装的是同一张服务着 70,000+ 名开发者的网络。无需购买代理，无需运行浏览器，网站变更时也无需修补任何东西。
7
官方语言 SDK
免费
每个库，最多 10,000 次免费请求
70K+
网络上的开发者
1
通用于每个产品的令牌
一行命令即可安装，用你的令牌初始化，随后 Crawling API 和每个抓取器都只需一次方法调用即可触达。
06 常见问题
SDK 问题。
面向 Node、Python、Ruby、PHP、Java、.NET 和 Go 的官方 SDK，另有一个 Scrapy 中间件和一个 Zapier 集成。它们全部免费，并通过一个客户端调用 Crawling API 和每个抓取器。
是的。每个 SDK 和库都是免费的。你只需为发起的 Crawling API 请求付费，而最多 10,000 次是免费的。
你不需要 SDK。Crawlbase API 是一个普通的 REST 端点，因此你可以用任何语言或工具直接通过 HTTP 调用它。
一个客户端覆盖 Crawling API 和抓取器，并为 autoparse、截图、地理定位和存储等参数提供辅助功能，因此你可以少写样板代码。
用你的某个 Crawlbase 令牌初始化客户端。同一个令牌通用于各个 SDK、Crawling API、Crawler 以及每个抓取器。
每个 SDK 都配有可复制粘贴的示例文档，如果你遇到问题或想贡献一个库，我们的支持团队随时待命。