登录

集成

为大多数团队已在运行的编排和数据流水线工具提供原生连接器。同一个 Crawling API，针对每个平台分别打包为节点 / 模块 / 应用 / 数据源 - 让您无需手动拼接 HTTP 请求。

何时使用集成、何时直接调用 API

如果您的工作流就在下列工具之一中，使用集成几乎总是正确的选择 - 它为您提供类型化输入、结构化输出，并免费附带平台原生的错误处理。如果您在自己的代码库中构建自定义流水线，则可以直接使用 SDKs 或 Crawling API。两者最终调用相同的端点；集成只是省去了拼接的麻烦。

现已可用

  • langchain - 适用于 Python 和 JS/TS 的 LangChain provider。将 Crawlbase 工具放入 agent 的工具集，agent 只需一次调用即可获取实时网页内容。
  • zapier - Zapier 应用。可从任意 Zap 触发抓取；解析后的结果将传入下一步（Sheets、Airtable、Slack，以及 Zapier 连接的任何工具）。
  • n8n - 适用于自托管工作流的 n8n 社区节点。单个 Crawlbase 节点即可原生调用 Crawling API - 方法、选项和输出均映射到 n8n 原生字段，无需 HTTP 拼接。

开发中

下列集成的文档已预发布，便于您了解即将推出的形态。实际的节点 / 模块 / 连接器尚未发布 - 页面会告诉您当前的变通方案（通常是平台内置的 HTTP 客户端 + 直接调用 Crawling API），以及在专用版本发布时接收通知的邮箱链接。

  • make soon - 可视化场景构建器（原 Integromat）。变通方案：Make 的 HTTP 应用 + Crawling API。
  • airbyte soon - 开源数据流水线。变通方案：使用 HTTP API 数据源对接 Crawling API，或推送到 Cloud Storage，再通过 Airbyte 的 S3 数据源摄取该 bucket。

没找到您使用的工具？

大多数具有 HTTP 动作原语的平台都可以直接调用 Crawlbase - Crawling API 就是一个使用 token 鉴权的常规 HTTPS 端点。API Playground 会生成请求模板，您可以将其粘贴到任意平台的 HTTP 步骤中。

如果您希望我们为本页未列出的工具提供专门的集成，请将使用场景写信至 support - 路线图部分由需求驱动。