产品 / 库与 SDK

库与 SDK。
一个令牌,支持每种语言。

面向 Node、Python、Ruby、PHP、Java、.NET 和 Go 的官方免费 SDK,另有 Scrapy 和 Zapier。
一行命令即可安装,或从任何环境直接通过 HTTP 调用 REST API。

7 种语言,2 种集成免费且开放npm · PyPI · RubyGems · Packagist
您的代码相同结果任意语言一个客户端SDK Client安装初始化调用已渲染的 HTML结构化 JSON屏幕截图api.get(url)autoparse: truescreenshot: truesdk call · one token · 200
实时 SDK 调用1.24M req/min流式传输
200yelp.com/biz/blue-bottle-sfCA70ms
200zillow.com/homedetails/123IN42ms
200walmart.com/ip/55088165JP41ms
200zillow.com/homedetails/123AU152ms
200indeed.com/viewjob?jk=8a1cAU58ms
200github.com/crawlbaseDE117ms
200yelp.com/biz/blue-bottle-sfFR206ms
200producthunt.com/posts/notionCA139ms
200glassdoor.com/Reviews/googleIN184ms
200indeed.com/viewjob?jk=8a1cSG93ms
200target.com/p/-/A-79348122SG130ms
200yelp.com/biz/blue-bottle-sfUS138ms
200linkedin.com/in/williamhgatesIN87ms
200booking.com/hotel/fr/le-meuriceCA48ms
200indeed.com/viewjob?jk=8a1cCA157ms
200etsy.com/listing/1029384IN43ms
200amazon.com/dp/B08N5JZGGWES215ms
200ebay.com/itm/195830173IN168ms
200etsy.com/listing/1029384SG62ms
301ebay.com/itm/195830173FR134ms
200google.com/search?q=4k+tvES184ms
200amazon.com/dp/B08N5JZGGWSG119ms
200glassdoor.com/Reviews/googleAU43ms
200linkedin.com/in/williamhgatesNL148ms
200producthunt.com/posts/notionBR149ms
200zillow.com/homedetails/123DE143ms
200yelp.com/biz/blue-bottle-sfCA70ms
200zillow.com/homedetails/123IN42ms
200walmart.com/ip/55088165JP41ms
200zillow.com/homedetails/123AU152ms
200indeed.com/viewjob?jk=8a1cAU58ms
200github.com/crawlbaseDE117ms
200yelp.com/biz/blue-bottle-sfFR206ms
200producthunt.com/posts/notionCA139ms
200glassdoor.com/Reviews/googleIN184ms
200indeed.com/viewjob?jk=8a1cSG93ms
200target.com/p/-/A-79348122SG130ms
200yelp.com/biz/blue-bottle-sfUS138ms
200linkedin.com/in/williamhgatesIN87ms
200booking.com/hotel/fr/le-meuriceCA48ms
200indeed.com/viewjob?jk=8a1cCA157ms
200etsy.com/listing/1029384IN43ms
200amazon.com/dp/B08N5JZGGWES215ms
200ebay.com/itm/195830173IN168ms
200etsy.com/listing/1029384SG62ms
301ebay.com/itm/195830173FR134ms
200google.com/search?q=4k+tvES184ms
200amazon.com/dp/B08N5JZGGWSG119ms
200glassdoor.com/Reviews/googleAU43ms
200linkedin.com/in/williamhgatesNL148ms
200producthunt.com/posts/notionBR149ms
200zillow.com/homedetails/123DE143ms
01 实时演示

同一次调用。选择你的语言。

一个客户端,实时输入。安装、用你的令牌初始化,然后开始抓取。每种语言都返回完全相同的 JSON。悬停可暂停并阅读。

就绪
按键 1-5 切换 · 点击暂停运行你自己的 URL
几分钟内运行你的第一个请求。最多 10,000 次免费请求,无需信用卡。免费开始
03 工作原理

从安装到取得数据,只需四行。

易于部署,无论你是刚刚起步还是大规模运行。

01

选择你的语言

Node、Python、Ruby、PHP、Java、.NET 或 Go。或者跳过 SDK,直接使用普通 HTTP。

02

安装软件包

从你的注册表一行安装:npm、PyPI、RubyGems、Packagist、Maven、NuGet 或 go get。

03

用你的令牌初始化

使用你的某个 Crawlbase 令牌创建客户端。同一个令牌在任何地方都通用。

04

调用 API

传入任意 URL 以及 autoparse 或 screenshot 等参数,然后读取响应。

04 备注

值得了解。

免费且开放

每个 SDK 和库都是免费的。你只需为发起的 Crawling API 请求付费,而最多 10,000 次是免费的。

任意语言,通过 HTTP

没有适配你技术栈的 SDK?该 API 是一个普通的 REST 端点,因此你可以从任何支持 HTTP 的环境直接调用它。

文档完备

每个 SDK 都在 SDK 文档 中有所介绍,附有可复制粘贴的安装和使用示例。

一个令牌,通用于每个产品

同一个令牌和客户端覆盖 Crawling API、Crawler 以及每个抓取器。请在 定价页面 查看用量定价。

05 为什么选择 Crawlbase

一个客户端,整个平台。

这些 SDK 封装的是同一张服务着 70,000+ 名开发者的网络。无需购买代理,无需运行浏览器,网站变更时也无需修补任何东西。

7
官方语言 SDK
免费
每个库,最多 10,000 次免费请求
70K+
网络上的开发者
1
通用于每个产品的令牌

一行命令即可安装,用你的令牌初始化,随后 Crawling API 和每个抓取器都只需一次方法调用即可触达。

06 常见问题

SDK 问题。

面向 Node、Python、Ruby、PHP、Java、.NET 和 Go 的官方 SDK,另有一个 Scrapy 中间件和一个 Zapier 集成。它们全部免费,并通过一个客户端调用 Crawling API 和每个抓取器。
是的。每个 SDK 和库都是免费的。你只需为发起的 Crawling API 请求付费,而最多 10,000 次是免费的。
你不需要 SDK。Crawlbase API 是一个普通的 REST 端点,因此你可以用任何语言或工具直接通过 HTTP 调用它。
一个客户端覆盖 Crawling API 和抓取器,并为 autoparse、截图、地理定位和存储等参数提供辅助功能,因此你可以少写样板代码。
用你的某个 Crawlbase 令牌初始化客户端。同一个令牌通用于各个 SDK、Crawling API、Crawler 以及每个抓取器。
每个 SDK 都配有可复制粘贴的示例文档,如果你遇到问题或想贡献一个库,我们的支持团队随时待命。

安装 SDK。
四行代码即可抓取。

免费起步,含最多 10,000 次免费 Crawling API 请求。一个令牌,支持每种语言。