Новые файлы в Databricks — записи в Microsoft SQL

Сценарий замечает появление файлов в Databricks и сам создаёт записи в Microsoft SQL. Работает само, без ручного переноса.

  • Каждый файл из Databricks — строка в реестре Microsoft SQL.
  • Имя и ссылка на файл фиксируются сами.
  • Файлы находятся по реестру, а не наугад по папкам.

Как это работает

Перенос данных из Databricks в Spotify делается готовым сценарием: он сам замечает новое и переносит его.

  1. Запуск: Расписание
  2. Затем: Google Drive
  3. Затем: Spotify
  4. Затем: Redis

Эту интеграцию Databricks и Spotify можно запустить в Scriptera: опишите задачу словами — сценарий соберут, запустят и будут следить, чтобы он работал.