Сценарий по расписанию забирает новые файлы с Databricks и пачками загружает их в OpenAI, сохраняя имена.
Чтобы данные из Databricks автоматически попадали в OpenAI, достаточно готового сценария — без выгрузок руками.
Настроить такую автоматизацию (Databricks + OpenAI) можно в Scriptera — без кода: опишите задачу, остальное сделают за вас.