# Crawling API 几分钟后
Мы создали API, который упростит интеграцию Crawlbase вашем проекте сканирования очень легко。
# Ваш первый вызов API
Все URL-адреса API начинаются со следующей базовой части: https://api.crawlbase.com
Поэтому сделать свой первый звонок так же просто, как запустить следующую команду в терминале.
试试吧!
curl 'https://api.crawlbase.com/?token=_USER_TOKEN_&url=https%3A%2F%2Fgithub.com%2Fcrawlbase%3Ftab%3Drepositories'
Иногда использования обычного токена недостаточно, либо потому, что сайт работает только при включенных браузерах JavaScript, либо потому, что необходимый вам контент отображается с помощью JavaScript на стороне клиента, для этого вам нужно использовать свой标记 JavaScript。
Продолжайте и попробуйте сканирование JS!
curl 'https://api.crawlbase.com/?token=_JS_TOKEN_&url=https%3A%2F%2Fgithub.com%2Fcrawlbase%3Ftab%3Drepositories'
警告 哪 解决方案&帖子 Запросы также поддерживаются。普奥塔鲁伊斯塔 伊迪·斯达 для получения дополнительной информации или продолжите ниже с параметрами API。
# 免费试用
1,000 запросов бесплатны.
Обязательно используйте бесплатную пробную версию в полном объеме!
# 限速
Скорость API orgраничена максимумом 20 世纪 запросов в секунду, за токен (лимит скорости может быть увеличен по запросу).
Это означает, что вы можете отправить до 20 запросов в секунду, что составляет около 51 миллиона запросов в месяц, независимо от количества используемых потоков。
API 反馈 429 код статуса при превышении лимита скорости。
注: Некоторые определенные веб-сайты могут иметь более низкие лимиты。 Если вам требуются более высокие лимиты на них, пожалуйста обратитесь в службу поддержки, (открывается новое окно) (打开新窗口).
# 无效 API
Среднее время ответа API составляет от 4 до 10 секунд, но 我们推荐 установка тайм-аута для звонков не менее 90 секунд。
# Успех против неудачи
Мы взимаем плату только за успешные запросы (см. 童话故事 и 斯塔图斯·普克 в параметрах ответа ниже)。
# 其他注意事项
- Если вы предпочитаете использовать библиотеку для интеграции Crawlbase, вы можете увидеть доступные Библиотеки API здесь (открывается новое окно) (打开新窗口).
- Рекомендуется использовать gzip-заголовок 接受编码。
- Scrapy 和 Python 的区别 отключить DNS-кэш (открывается новое окно) (打开新窗口).
# 认证
Для использования API вам понадобятся токены аутентификациии。
У вас есть два токена: один для обычных запросов и другой для запросов JavaScript (реальные браузеры)。
奥比奇尼伊图肯
_USER_TOKEN_
JavaScript 工具
_JS_TOKEN_