Новые файлы в Databricks — поиск документов в Google Cloud Firestore — вариант 2

Сценарий замечает появление файлов в Databricks и сам находит документы в Google Cloud Firestore. Работает само, без ручного переноса.

К каждому новому файлу из Databricks сразу найден связанный документ в Google Cloud Firestore.
Не ищешь нужный документ вручную — он под рукой.
Файлы сразу привязаны к своим документам.

Как это работает

Перенос данных из Databricks в Google Cloud Firestore делается готовым сценарием: он сам замечает новое и переносит его.

Такой сценарий можно запустить в Scriptera: задача описывается обычными словами, сборка и запуск — на стороне сервиса.