ZenRows API: извлечение данных с защищённых сайтов без своей инфраструктуры

Веб-скрапинг — это не просто HTTP-запрос. Современные сайты защищены антибот-системами, контент грузится через JavaScript, а IP-адреса блокируются после первой сотни запросов. Настроить прокси-ротацию, поддержку headless-браузеров и обход Cloudflare своими силами — это недели работы и постоянная поддержка.

ZenRows решает эту задачу как облачный сервис. Один API-вызов заменяет инфраструктуру из прокси-фермы, браузерной фермы и системы мониторинга антибот-правил. Вы передаёте URL — получаете данные в HTML, Markdown или JSON.

Ключевая разница с self-hosted скраперами: не нужно настраивать прокси, ротировать IP и отслеживать обновления правил Cloudflare. Сервис адаптируется к защитам автоматически, заявленный uptime residential-прокси — 99,9%.

Что это

ZenRows — облачный API для извлечения данных с публичных веб-страниц. Сервис берёт на себя всю инфраструктуру скрапинга: обход антибот-систем, JavaScript-рендеринг, ротацию residential-прокси, управление сессиями. Пользователь передаёт URL и параметры запроса, в ответ получает контент страницы в одном из форматов: HTML, Markdown, JSON, plaintext или PDF.

Пул прокси-серверов ZenRows включает более 55 миллионов residential IP-адресов из 190+ стран. Это означает, что каждый запрос может приходить с разного реального IP-адреса, принадлежащего интернет-провайдеру, а не дата-центру — такие адреса не вызывают подозрений у антибот-систем.

API работает по REST-принципу: GET-запрос к https://api.zenrows.com/v1/ с параметрами url и apikey. Дополнительные параметры управляют рендерингом, прокси, форматом ответа и сессиями. Для разработчиков доступны SDK для Python и Node.js, а также REST API для любого языка программирования.

Зачем нужно

Если вы когда-нибудь пытались собрать данные с сайта, защищённого Cloudflare, вы знаете, что обычный requests.get() возвращает пустую страницу или капчу. ZenRows устраняет эту проблему: антибот-защита обходится на стороне сервиса, и вы получаете чистый контент.

Практические сценарии:

RAG (Retrieval-Augmented Generation) — архитектура, где языковая модель дополняет ответы данными из внешних источников. ZenRows позволяет подключить к такой системе любой сайт как источник актуальной информации: данные возвращаются в Markdown, готовые для векторизации и подачи в LLM.

Как устроено

API-параметры

Основной эндпоинт — https://api.zenrows.com/v1/. Обязательные параметры: apikey и url. Остальные параметры включаются по необходимости.

Антибот-обход

ZenRows работает с защитой Cloudflare, DataDome, Akamai и другими системами без ручной настройки. Механика: residential-прокси подменяют IP, headless-браузер рендерит JavaScript, система автоматически подбирает конфигурацию для каждого сайта. Adaptive Stealth Mode (mode=auto) начинает с самого дешёвого варианта и эскалирует до JS-рендеринга или premium-прокси только при необходимости.

JavaScript-рендеринг

Сайты на React, Vue, Angular и другие SPA требуют выполнения JavaScript для загрузки контента. Параметр js_render=true включает headless-браузер, который дожидается загрузки, прокручивает страницу и кликает по кнопкам. Дополнительные параметры wait и wait_for управляют таймингами.

Сессии

Параметр session_id фиксирует IP-адрес на несколько запросов — до 10 минут. Это нужно для многошаговых сценариев: авторизация, корзина, пагинация, где сервер ожидает один и тот же IP.

Геолокация

Residential-прокси из 190+ стран через параметр proxy_country. Используется для доступа к региональному контенту: локальные цены, региональные версии сайтов, гео-ограниченный контент.

Интеграции

ZenRows интегрируется с популярными no-code и AI-инструментами:

Для разработчиков есть SDK для Python и Node.js, а также REST API для любого языка. На GitHub доступны официальные репозитории zenrows-python-sdk и zenrows-node-sdk.

Когда использовать

ZenRows подходит, когда:

• Сайт защищён антибот-системой и обычные HTTP-клиенты не работают
• Контент загружается через JavaScript и нужен рендеринг
• Требуются residential-прокси для гео-таргетинга
• Нужен вывод данных в Markdown или JSON для подачи в LLM
• Объём запросов от тысячи до миллионов — инфраструктуру масштабирует сервис

Не подходит, когда:

• Нужен полный контроль над браузером (для этого есть Scraping Browser — отдельный продукт ZenRows)
• Достаточно простого HTTP-запроса без защиты (Cloudflare отсутствует)
• Бюджет не позволяет платить за каждый запрос

Пример

Базовый запрос к API на Python:

import requests
import os

params = {
    'url': 'https://www.example.com/',
    'apikey': os.environ.get('ZENROWS_API_KEY'),
    'js_render': 'true',
    'premium_proxy': 'true',
}

response = requests.get('https://api.zenrows.com/v1/', params=params)
print(response.text)

Параметр js_render включает headless-браузер, premium_proxy — residential-прокси. Для простых статичных страниц оба параметра можно не указывать — запрос будет дешевле.

API-ключ храните в переменных окружения, никогда не коммитьте в репозиторий.

Модель оплаты

ZenRows берёт деньги только за успешные запросы. Если запрос не вернул данные — вы не платите. HTTP 404 и 410 считаются успешными — запрос выполнен корректно, данные возвращены.

Стоимость зависит от сложности запроса. Базовый запрос дешевле, с включением JavaScript-рендеринга или premium-прокси цена растёт:

Adaptive Stealth Mode (mode=auto) использует те же множители — вы платите только за конфигурацию, которая сработала. Если внутренние попытки потребовали эскалации, оплачивается только успешный запрос.