База знаний из веб-страниц — по одной ссылке

Отправьте ссылку — сценарий заберёт содержимое страницы в базу знаний, а бот будет отвечать на вопросы по собранным источникам.

  • Новый источник — просто ссылка
  • Страница сохраняется чистым текстом
  • Бот отвечает по собранным страницам
  • База растёт без ручной работы
WebhookScrape page with FirecrawlPinecone Vector StoreEmbeddings OpenAIDefault Data LoaderChat

Как это работает

Интеграция scraperApi и Webhook собирается из готового сценария — вот как он устроен по шагам.

  1. Запуск: Получить URL
  2. Затем: Проверить и нормализовать URL
  3. Затем: Спарсить страницу через Firecrawl
  4. Затем: Сохранить эмбеддинги в Pinecone
  5. Запуск: Вернуть результат загрузки
  6. Запуск: Вернуть ошибку валидации URL
  7. Затем: Сгенерировать эмбеддинги OpenAI
  8. Затем: Загрузить спарсенный контент
  9. Запуск: Получить сообщение чата
  10. Затем: Ответить на запрос из базы знаний
  11. Затем: OpenRouter LLM
  12. Затем: Память чата
  13. Затем: Получить документы из Pinecone
  14. Затем: Сгенерировать эмбеддинги OpenAI1
  15. Затем: Переранжировать результаты с Cohere

Настроить такую автоматизацию (scraperApi + Webhook) можно в Scriptera — без кода: опишите задачу, остальное сделают за вас.