Новые корзины файлов в Google Cloud Storage — файлы в Databricks

Сценарий замечает появление корзин файлов в Google Cloud Storage и сам создаёт файлы в Databricks. Работает само, без ручного переноса.

  • Каждый новый файл из Google Cloud Storage автоматически копируется в Databricks.
  • Резервные и рабочие копии создаются сами.
  • Ничего не приходится дублировать вручную.

Как это работает

Чтобы данные из Google Cloud Storage автоматически попадали в Databricks, достаточно готового сценария — без выгрузок руками.

  1. Запуск: Расписание
  2. Затем: Vk Cloud S3
  3. Затем: Google Drive

Эту интеграцию Google Cloud Storage и Databricks можно запустить в Scriptera: опишите задачу словами — сценарий соберут, запустят и будут следить, чтобы он работал.