Разбор сайта: профиль компании и классификация всех страниц

Как это работает

Чтобы данные из brightData автоматически попадали в Map a website and get urls, достаточно готового сценария — без выгрузок руками.

1. Запуск: Отправка формы
2. Затем: Извлечь URL сайта
3. Затем: Извлечь HTML
4. Затем: Очистить HTML-контент
5. Затем: Собрать информацию о компании
6. Затем: Распарсить JSON-данные
7. Затем: Обновить лист парсера доменов
8. Затем: Картировать сайт и получить URL
9. Затем: Распарсить URL с метаданными
10. Затем: Распарсить массив URL
11. Проверка: Разделить на пакеты
12. Затем: Категоризировать AI Agent
13. Затем: Обработать URL с категориями
14. Затем: Обработать категории
15. Затем: Добавить категории
16. Затем: Обработать товары
17. Затем: Добавить товары
18. Затем: Обработать прочее
19. Затем: Добавить прочее

Настроить такую автоматизацию (brightData + Map a website and get urls) можно в Scriptera — без кода: опишите задачу, остальное сделают за вас.