Maxun: Веб-скрейпинг без кода — мечта аналитика и маркетолога
Знакомы с ситуацией, когда нужно регулярно собирать данные с сайтов конкурентов, но писать парсеры вручную слишком долго? Или когда клиент просит выгрузить каталог товаров, а у сайта нет нормального API? Maxun решает эти проблемы кардинально новым способом — через обучение ботов визуальным интерфейсом.
Что такое Maxun?
Maxun — это open-source платформа для извлечения веб-данных, которая позволяет:
- Создавать ботов через интерфейс без программирования
- Автоматизировать сбор структурированных данных
- Превращать любые сайты в API или Google-таблицы
- Работать с пагинацией и скроллингом
Проект набрал 13k+ звезд на GitHub за год и активно развивается.
Кому это нужно?
- Маркетологам — для мониторинга цен конкурентов
- Аналитикам — для сбора рыночных данных
- Разработчикам — как альтернатива API для сайтов, где его нет
- Исследователям — для академических проектов по анализу данных
3 главные фичи, которые меняют правила игры
1. Обучение бота за 2 минуты
Maxun использует подход "покажи и нажми": вы отмечаете элементы на странице, которые нужно извлекать, а система запоминает паттерн. Никакого кода — только визуальный интерфейс.
2. Три типа сбора данных
- Списки — для товаров в каталогах (например, парсинг Amazon)
- Текст — отдельные элементы (цены, описания)
- Скриншоты — целые страницы или фрагменты
3. Интеграции и автоматизация
Готовые интеграции с:
- Google Sheets
- Airtable
- Возможность создавать собственные API
Плюс планировщик задач для регулярного сбора данных.
Техническая кухня
Под капотом Maxun использует:
- Playwright для браузерной автоматизации
- PostgreSQL как основное хранилище
- MinIO для скриншотов
- Redis для кеширования
Проект написан на TypeScript и доступен под лицензией AGPLv3.
Как начать?
Есть два пути:
- Облачная версия — самый быстрый старт (app.maxun.dev)
- Self-hosted — для полного контроля (инструкции ниже)
Установка через Docker:
docker-compose up -d
После запуска интерфейс будет доступен на http://localhost:5173.
Реальные кейсы использования
- E-commerce мониторинг — отслеживание цен и ассортимента у конкурентов
- Новостные агрегаторы — сбор статей с разных источников
- Академические исследования — анализ трендов по открытым данным
- HR-аналитика — мониторинг вакансий на рынке труда
Плюсы и минусы
✅ Преимущества:
- Нулевой порог входа
- Поддержка сложных сценариев (логины, пагинация)
- Открытый исходный код
⚠️ Ограничения:
- Проект в активной разработке (могут быть баги)
- Для сложных сайтов может потребоваться настройка прокси
Вывод: стоит ли пробовать?
Maxun — отличное решение для тех, кто:
- Не хочет писать парсеры с нуля
- Регулярно работает с веб-данными
- Ценит open-source подход
Для разработчиков это еще и интересный проект для изучения современных технологий браузерной автоматизации.
Ссылки для старта:
