Новые файлы в Databricks — запуск запросов в Microsoft SQL

Сценарий замечает появление файлов в Databricks и сам запускает запросы в Microsoft SQL. Работает само, без ручного переноса.

  • Каждый файл в Databricks сразу запускает обработку в Microsoft SQL.
  • Файлы не лежат в ожидании ручного запуска.
  • Обработка идёт в тот же миг, круглосуточно.

Как это работает

Перенос данных из Databricks в Microsoft SQL делается готовым сценарием: он сам замечает новое и переносит его.

  1. Запуск: Расписание
  2. Затем: Google Drive
  3. Затем: Snowflake

Эту интеграцию Databricks и Microsoft SQL можно запустить в Scriptera: опишите задачу словами — сценарий соберут, запустят и будут следить, чтобы он работал.