Сценарий по расписанию удаляет из базы устаревшие записи истории, чтобы она не разрасталась и не замедлялась.
Автоматизация Databricks не требует кода: готовый сценарий выполняет рутину сам.
Настроить такую автоматизацию можно в Scriptera — без кода: опишите задачу, остальное сделают за вас.