# 探索机器人 API
通过 l'API 监视机器人统计数据、清理机器人、暂停/报告机器人、查看 ci-dessous 指令:
注意: 将 robots d'exploration JS 替换为 jeton TCP,将 jeton JS 替换为所有 API 应用程序。
# 统计 API
探索机器人的简历包括并发、文件和探索历史 (répartition des réussites et des échecs):
curl 'https://api.crawlbase.com/crawler/_USER_TOKEN_/stats'
筛选日期历史:
curl 'https://api.crawlbase.com/crawler/_USER_TOKEN_/stats?history_from=yyyy-mm-dd&history_to=yyyy-mm-dd'
# 清除 API
倒出机器人专用的净化器,要求 POST avec le nom et le jeton du robots (JS/TCP) :
curl -X POST 'https://api.crawlbase.com/crawler/_USER_TOKEN_/YourCrawlerName/purge'
注意: 立即购买 所有页面 你的机器人。
# 完成工作 API
请为机器人提供帮助,请以 POST 方式请求 RID,并以机器人和 jeton 的名称 (JS/TCP) :
curl -X POST 'https://api.crawlbase.com/crawler/_USER_TOKEN_/YourCrawlerName/delete_job?rid=RID'
# 就业研究 API
请在机器人关注文件中查找 RID 请求,使用 GET suivante (JS/TCP) 请求:
curl 'https://api.crawlbase.com/crawler/_USER_TOKEN_/YourCrawlerName/find_by_rid/RID'
反应变量
- Si EN FILE D'ATTENTE :
{
"status": "QUEUED",
"request_info": {
"rid": "YOUR_RID",
"url": "YOUR_URL",
"retry": 3,
"created_at": 1600494969.189415
}
}
- 是 NON_MIS_EN_QUEUE : 如果您需要探索或不关注文件。
{
"status": "NOT_QUEUED",
"request_info": {
"rid": "YOUR_RID"
}
}
# 暂停 API
暂停机器人探索时,请使用 POST 请求机器人探索的名称和喷射 (JS/TCP):
curl -X POST 'https://api.crawlbase.com/crawler/_USER_TOKEN_/YourCrawlerName/pause'
# API 取消激活
激活机器人探索,并在 POST 中启用机器人探索 (JS/TCP):
curl -X POST 'https://api.crawlbase.com/crawler/_USER_TOKEN_/YourCrawlerName/unpause'