Новые файлы в Express — запуск запросов в Databricks

Сценарий замечает появление файлов в Express и сам запускает запросы в Databricks. Работает само, без ручного переноса.

  • Каждый файл в Express сразу запускает обработку в Databricks.
  • Файлы не лежат в ожидании ручного запуска.
  • Обработка идёт в тот же миг, круглосуточно.

Как это работает

Чтобы данные из Express автоматически попадали в Databricks, достаточно готового сценария — без выгрузок руками.

  1. Запуск: Расписание
  2. Затем: Google Drive
  3. Затем: Snowflake

Настроить такую автоматизацию (Express + Databricks) можно в Scriptera — без кода: опишите задачу, остальное сделают за вас.