api.crawlbase.com
200 OK
的GET
https://www.nytimes.com/2026/03/article&format=md
01
调用 api.crawlbase.com/?url=nytimes.com&format=md
02
通过美国住宅IP进行路由
03
获取文章·可读性提取
04
将 HTML 转换为简洁的 Markdown
05
生成 4.2 KB 的 Markdown 文件
文章.md
1
2
3
4
5
6
7
8
9
10
11
12
13
14
# 2026 年人工智能基础设施状况
数据工程团队已从批量 ETL 转向 **流媒体优先**
管道。 Crawlbase 报告一个 **同比增长 42%**
MCP方向交通流量增长。
## 主要要点
-
住宅代理仍然是 *默认*
用于电子商务数据。
-
异步+存储技术目前支持 67% 的爬虫作业。
-
LLM 就绪的输出（Markdown、JSON）速度是原始 HTML 的 3 倍。
＃＃ 引用
我们迁移了 14 万个 URL Crawlbase
“周末就能搞定。”——B轮融资金融科技公司工程负责人
常见问题
你想知道的一切
如果你的问题没有在这里列出，请 ping 我们的团队 他们回复很快。
什么是 Crawlbase?
Crawlbase 是面向开发者、企业和LLM的Web数据基础设施。一个账户和一个令牌即可覆盖所有需求。 Crawling API异步 Enterprise Crawler, Smart AI Proxy, Cloud Storage，并 Web MCP 适用于人工智能代理——内置住宅代理、JavaScript渲染和反机器人处理功能。请参阅 完整文档.
我需要一张信用卡才能开始吗？
不。每个新账户都提供 1,000 次免费成功请求，无需信用卡，因此您可以先测试所有输出格式——HTML、JSON、Markdown 和屏幕截图。只有在需要更多流量时才添加信用卡；按使用量计费的套餐正在开发中。 定价页面.
支持哪些语言和SDK？
该 API 采用纯 HTTP 协议，因此任何能够发起请求的语言都可以使用。我们提供了官方的 SDK。 Python , Node, 红宝石, PHP和 Go此外，还有提供更多语言的社区图书馆——参见 所有图书馆.
如果请求失败会发生什么？
您只需为成功的请求付费。 Crawling API 软失败时会自动使用不同的代理和请求头进行重试，并且只有成功请求才会计入您的配额——超时、阻塞和目标 5xx 错误均不计入配额，因此重试是安全的。详情请参阅[此处]。 Crawling API 文档.
我可以将请求定位到特定国家/地区吗？
是的。添加一个包含两位字母 ISO 代码的国家/地区参数（例如 country=US 或 country=DE），请求将通过该地区的住宅出口节点进行路由，覆盖二十多个国家/地区。 Crawlbase 可能会自动选择特定网站的最佳代理，以保持较高的成功率。请参阅国家/地区参数。 Crawling API 文档.