AnyCrawler
API, который превращает живые веб-страницы и результаты поиска в чистый Markdown для ИИ-агентов и RAG-конвейеров.
- Можно попробовать бесплатно
- Да
- Без регистрации
- Да
- Русский интерфейс
- Нет
- Цена от
- $5/мес
AnyCrawler — облачный API доступа к вебу для ИИ-агентов, RAG-систем и автоматизаций. Сервис загружает страницу или рендерит её в браузере, если контент строится JavaScript, и возвращает очищенный Markdown вместо сырого HTML. Кроме чтения страниц, он умеет искать в вебе, новостях, видео, картинках и научных публикациях и делать скриншоты. Оплата идёт кредитами: каждая операция имеет известную стоимость, а запросы и расход видны в журнале аккаунта. Для агентов есть готовый Agent Skill, который ставится из репозитория на GitHub, так что собственный стек из браузера и краулера строить не нужно.
Возможности
Поиск по вебу
Находит адреса источников через поиск по вебу, картинкам, новостям, видео и научным публикациям. Стоимость — 2 кредита за каждый возвращённый результат.
Fetch: страница в Markdown
Достаёт Markdown и выбранные метаданные со страниц, где контент уже есть в HTML. Операция стоит 2 кредита.
Рендеринг JavaScript-сайтов
Загружает страницу в браузере и только потом извлекает содержимое, поэтому читаются динамические сайты. Базовая стоимость — 10 кредитов.
Скриншоты страниц
Делает PNG-снимки видимой области (20 кредитов) или всей страницы (50 кредитов). Снимки запрашиваются отдельно от текста.
Agent Skill для агентов
Два навыка, один для чтения и скриншотов страниц, другой для поиска, подключаются к ИИ-агенту из репозитория GitHub. Нужен API-ключ из личного кабинета.
Ключи, журнал и кредиты
В кабинете выдаются API-ключи, ведётся журнал запросов и показан расход кредитов. Ответ содержит число списанных кредитов.
Бесплатная проверка URL
Страница Try a URL позволяет посмотреть результат обработки адреса без регистрации.
Кому подойдёт
- Разработчики
Подключают живой веб к агентам и RAG-конвейерам через один API, не поддерживая собственные браузеры и краулеры.
- Исследователи и учёные
Собирают материалы по новостям, научным публикациям и сайтам в виде чистого текста для дальнейшего анализа моделью.
- Аналитики
Настраивают мониторинг и регулярный сбор данных со страниц, включая динамические сайты.
- Агентства и фрилансеры
Собирают автоматизации, которым нужен свежий контент из интернета, с понятной оплатой за использование.
Как начать
- Открыть бесплатный инструмент Try a URL и проверить обработку любого адреса без регистрации.
- Зарегистрироваться через Google или GitHub и получить 5000 бесплатных кредитов.
- Создать API-ключ в личном кабинете.
- Отправить запрос на поиск, fetch или render к API либо установить Agent Skill в своего агента.
- Проверить расход кредитов и журнал запросов в кабинете.
Тарифы
Операции списывают кредиты: поиск — 2 за результат, fetch — 2, render — 10, скриншот области — 20, полной страницы — 50. Метаданные, ссылки и медиа добавляют по 1 кредиту. Для больших объёмов цена по запросу.
Ограничения
- Бесплатные 5000 кредитов выдаются один раз, а не ежемесячно
- Скриншоты запрашиваются отдельно и не включают Markdown
- Fetch не выполняет JavaScript, для динамических страниц нужен render, он в пять раз дороже
- На бесплатном тарифе 30 запросов в минуту и один параллельный браузер
Платформы и интеграции
Соседи по смыслу
за последний месяц