# 探索机器人 API

通过 l'API 监视机器人统计数据、清理机器人、暂停/报告机器人、查看 ci-dessous 指令:

注意: 将 robots d'exploration JS 替换为 jeton TCP,将 jeton JS 替换为所有 API 应用程序。

# 统计 API

探索机器人的简历包括并发、文件和探索历史 (répartition des réussites et des échecs):

curl 'https://api.crawlbase.com/crawler/_USER_TOKEN_/stats'

筛选日期历史:

curl 'https://api.crawlbase.com/crawler/_USER_TOKEN_/stats?history_from=yyyy-mm-dd&history_to=yyyy-mm-dd'

# 清除 API

倒出机器人专用的净化器,要求 POST avec le nom et le jeton du robots (JS/TCP) :

curl -X POST 'https://api.crawlbase.com/crawler/_USER_TOKEN_/YourCrawlerName/purge'

注意: 立即购买 所有页面 你的机器人。

# 完成工作 API

请为机器人提供帮助,请以 POST 方式请求 RID,并以机器人和 jeton 的名称 (JS/TCP) :

curl -X POST 'https://api.crawlbase.com/crawler/_USER_TOKEN_/YourCrawlerName/delete_job?rid=RID'

# 就业研究 API

请在机器人关注文件中查找 RID 请求,使用 GET suivante (JS/TCP) 请求:

curl 'https://api.crawlbase.com/crawler/_USER_TOKEN_/YourCrawlerName/find_by_rid/RID'

反应变量

  • Si EN FILE D'ATTENTE :
{
  "status": "QUEUED",
  "request_info": {
    "rid": "YOUR_RID",
    "url": "YOUR_URL",
    "retry": 3,
    "created_at": 1600494969.189415
  }
}
  • 是 NON_MIS_EN_QUEUE : 如果您需要探索或不关注文件。
{
  "status": "NOT_QUEUED",
  "request_info": {
    "rid": "YOUR_RID"
  }
}

# 暂停 API

暂停机器人探索时,请使用 POST 请求机器人探索的名称和喷射 (JS/TCP):

curl -X POST 'https://api.crawlbase.com/crawler/_USER_TOKEN_/YourCrawlerName/pause'

# API 取消激活

激活机器人探索,并在 POST 中启用机器人探索 (JS/TCP):

curl -X POST 'https://api.crawlbase.com/crawler/_USER_TOKEN_/YourCrawlerName/unpause'