Практический курс по оркестрации скриптов на Python и автоматизации обработки данных с Apache Airflow 2.0
На выходе
Проектировать и автоматизировать цепочки обработки данных (DAGs); Разворачивать и настраивать Apache Airflow 2.0; Использовать Taskflow API для создания понятных пайплайнов; Управлять зависимостями между задачами и планировать их выполнение; Оптимизировать работу планировщика для высоконагруженных систем
Навыки
Apache Airflow 2.0 · Taskflow API · написание DAGs · планирование задач · оркестрация Python-скриптов · настройка пайплайнов