Новые файлы в Databricks — удаление документов в Elasticsearch

Сценарий замечает появление файлов в Databricks и сам удаляет документы в Elasticsearch. Работает само, без ручного переноса.

  • Лишнее убирается само
  • Реакция в момент появления, а не раз в день
  • Никакого копирования между вкладками

Как это работает

Перенос данных из Databricks в Elasticsearch делается готовым сценарием: он сам замечает новое и переносит его.

  1. Запуск: Расписание
  2. Затем: Google Drive
  3. Затем: Google Drive 2
  4. Затем: Bamboo Hr

Эту интеграцию Databricks и Elasticsearch можно запустить в Scriptera: опишите задачу словами — сценарий соберут, запустят и будут следить, чтобы он работал.