Новые файлы в Databricks — записи в Stackby

Сценарий замечает появление файлов в Databricks и сам создаёт записи в Stackby. Работает само, без ручного переноса.

  • Каждый файл из Databricks — строка в реестре Stackby.
  • Имя и ссылка на файл фиксируются сами.
  • Файлы находятся по реестру, а не наугад по папкам.

Как это работает

Перенос данных из Databricks в Spotify делается готовым сценарием: он сам замечает новое и переносит его.

  1. Запуск: Расписание
  2. Затем: Google Drive
  3. Затем: Spotify
  4. Затем: Redis

Такой сценарий можно запустить в Scriptera: задача описывается обычными словами, сборка и запуск — на стороне сервиса.