Чему вы научитесь
- Научитесь строить надежные ETL-пайплайны на базе Dagster и Apache NiFi, применяя Software Defined Assets и кастомные IOManager для сбора и записи данных в PostgreSQL. Вы освоите автоматизацию обработки информации через внешние API и развертывание оркестратора в контейнерах Docker.
О курсе
Хотите освоить ETL-разработку и оркестрацию?
Наш тренажер дает фундаментальные знания. Вы поймете принципы построения пайплайнов, поэтому после курса сможете работать с любым оркестратором — будь то Dagster, Airflow или Prefect.
Dagster завоевал любовь, потому что он:
Asset-based подход. Смещает фокус с простого выполнения задач на управление качеством и актуальностью самих данных (Software Defined Assets).
Observability. Делает процессы прозрачными за счет автоматического сбора богатых метаданных.
Data Li
Преподаватели курса
6 802
Как проходит обучение
Наш подход к обучению стирает границы между теорией и практикой, предлагая вам немедленное применение знаний в реальных условиях. Забудьте о скучных видеолекциях и бесконечном запоминании правил.