Новые папки в AWS S3 — файлы в Databricks

Сценарий замечает появление папок в AWS S3 и сам создаёт файлы в Databricks. Работает само, без ручного переноса.

  • Каждый новый файл из AWS S3 автоматически копируется в Databricks.
  • Резервные и рабочие копии создаются сами.
  • Ничего не приходится дублировать вручную.
Поставить себеScriptera

Как это работает

Перенос данных из AWS S3 в Databricks делается готовым сценарием: он сам замечает новое и переносит его.

  1. Запуск: Расписание
  2. Затем: Click Up
  3. Затем: Google Drive

Настроить такую автоматизацию (AWS S3 + Databricks) можно в Scriptera — без кода: опишите задачу, остальное сделают за вас.

Похожие сценарии