Загрузка файлов в базу для смыслового поиска

Сценарий забирает файлы с сервера и загружает их в базу так, что по содержимому можно искать по смыслу, а не по названию.

  • Файлы с сервера попадают в поисковую базу
  • Поиск по смыслу, а не по названию
  • Обработка пачками
  • Ничего не нужно писать руками
Qdrant Vector StoreEmbeddings OpenAIDefault Data Loader
Подключить Postgres PGVector Store и запуститьScriptera

Как это работает

Интеграция Postgres PGVector Store и selectelS3 собирается из готового сценария — вот как он устроен по шагам.

  1. Запуск: Запуск вручную
  2. Затем: Перечислить все файлы
  3. Проверка: Цикл по одному элементу
  4. Затем: Скачать элемент
  5. Затем: Векторное хранилище Qdrant
  6. Затем: Векторные представления OpenAI
  7. Затем: Загрузчик данных по умолчанию
  8. Затем: Разделитель текста по символам

Такой сценарий можно запустить в Scriptera: задача описывается обычными словами, сборка и запуск — на стороне сервиса.

Похожие сценарии