Чтобы связать carrotQuest и Databricks, не нужен программист: готовый сценарий соединяет их за пару минут.
Эту интеграцию carrotQuest и Databricks можно запустить в Scriptera: опишите задачу словами — сценарий соберут, запустят и будут следить, чтобы он работал.