Обновления записей в AWS DynamoDB — файлы в Databricks

Сценарий замечает изменения записей в AWS DynamoDB и сам создаёт файлы в Databricks. Работает само, без ручного переноса.

  • Изменение записи в AWS DynamoDB создаёт нужную папку или файл в Databricks.
  • Место под документы готово заранее, к каждому этапу.
  • Не готовишь папки вручную при каждом изменении.

Как это работает

Перенос данных из AWS DynamoDB в Databricks делается готовым сценарием: он сам замечает новое и переносит его.

  1. Запуск: Расписание
  2. Затем: Redis
  3. Затем: Google Drive

Настроить такую автоматизацию (AWS DynamoDB + Databricks) можно в Scriptera — без кода: опишите задачу, остальное сделают за вас.