Сайт целиком — в текстовую базу для нейросети

Как это работает

Перенос данных из mailopost в делается готовым сценарием: он сам замечает новое и переносит его.

1. Запуск: Ручной триггер
2. Затем: Установить веб-сайт
3. Затем: Собрать данные с главной страницы
4. Затем: Извлечь ссылки из HTML
5. Затем: Разделить ссылки
6. Затем: Удалить дубликаты ссылок
7. Проверка: Отфильтровать реальные гиперссылки
8. Проверка: Разделить изображения и ссылки
9. Если да — Агрегировать изображения
10. Затем: Добавить изображения в таблицу
11. Если нет — Агрегировать ссылки
12. Затем: Добавить ссылки в таблицу
13. Если нет — Собрать данные с контентных ссылок
14. Затем: Преобразовать в Markdown
15. Затем: Агрегировать собранный контент
16. Затем: Добавить собранный контент в таблицу

Эту интеграцию mailopost и ваших сервисов можно запустить в Scriptera: опишите задачу словами — сценарий соберут, запустят и будут следить, чтобы он работал.