Курс по ETL-разработке и оркестрации на Dagster и Apache Nifi, DLT
- Суть
- Построение надежных ETL-пайплайнов и оркестрация на базе Dagster, Apache NiFi и DLT
- На выходе
- Строить надежные ETL-пайплайны на базе Dagster и Apache NiFi; Автоматизировать обработку информации через внешние API; Развертывать оркестратор в контейнерах Docker; Извлекать и нормализовать данные на Python; Создавать end-to-end пайплайны
- Навыки
- Dagster · Apache NiFi · Software Defined Assets · Разработка IOManager · PostgreSQL · Docker