Весь сайт в базу знаний — для поиска и ответов по содержимому

Указываете сайт — сценарий обходит все его страницы, вытаскивает текст и складывает в базу знаний, готовую для поиска и ответов.

  • Все страницы сайта обходятся автоматически
  • Повторяющиеся адреса отсеиваются
  • Содержимое ложится в базу знаний для поиска
  • Основа для бота, отвечающего по сайту
Default Data LoaderEmbeddings Google GeminiPinecone Vector Storen8n Form
Подключить Postgres PGVector Store и запуститьScriptera

Как это работает

Чтобы связать Postgres PGVector Store и Default Data Loader, не нужен программист: готовый сценарий соединяет их за пару минут.

  1. Запуск: Ввод sitemap или URL страниц
  2. Проверка: Переключить
  3. Если да — Разделить URL страниц
  4. Проверка: Объединить URL
  5. Затем: Удалить дубликаты URL
  6. Проверка: Цикл по URL страниц
  7. Затем: Извлечь содержимое
  8. Затем: Pinecone KnowledgeBase
  9. Затем: Получение страницы HTML для контента
  10. Затем: Подождать 5 сек
  11. Если нет — Получить sitemap
  12. Затем: Конвертация XML
  13. Затем: Извлечь URL страниц
  14. Затем: Загрузчик данных
  15. Затем: Embeddings Gemini

Эту интеграцию Postgres PGVector Store и Default Data Loader можно запустить в Scriptera: опишите задачу словами — сценарий соберут, запустят и будут следить, чтобы он работал.

Похожие сценарии