Сценарий по расписанию забирает новые файлы с Databricks и пачками загружает их в Netscaler ADC, сохраняя имена.
Перенос данных из Databricks в Netscaler ADC делается готовым сценарием: он сам замечает новое и переносит его.
Настроить такую автоматизацию (Databricks + Netscaler ADC) можно в Scriptera — без кода: опишите задачу, остальное сделают за вас.