Новые файлы в Databricks — обновление записей в Microsoft SQL

Сценарий замечает появление файлов в Databricks и сам обновляет записи в Microsoft SQL. Работает само, без ручного переноса.

  • Новый файл в Databricks сразу обновляет связанную запись в Microsoft SQL.
  • По базе видно, где файл уже приложен, а где нет.
  • Не отмечаешь получение файлов вручную.

Как это работает

Перенос данных из Databricks в Microsoft SQL делается готовым сценарием: он сам замечает новое и переносит его.

  1. Запуск: Расписание
  2. Затем: Google Drive
  3. Затем: Zoho Crm

Такой сценарий можно запустить в Scriptera: задача описывается обычными словами, сборка и запуск — на стороне сервиса.