Курс на Stepik
Обложка курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark» на Stepik
8 990 ₽

Data Engineering Fast‑Track: Kafka → Airflow → Spark 4.000

Открыть на
STEPIK.ORG

Практический fast-track по data engineering: за 4–6 недель собираем рабочий конвейер Kafka → Spark → Lakehouse под управлением Airflow. Разберём batch и streaming, окна и watermark, схемы и контракты. Мини‑проекты, Docker Compose, шаблоны DAG и пайплайнов. Курс подойдёт инженерам, аналитикам и тем, кто хочет освоить современные пайплайны данных с уверенным Python.

Показатель Текущие показатели Рост
Значение 🏆 Рейтинг 3 дн 7 дн 30 дн
Количество учеников на курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Учеников на курсе 163
Сертификаты, выданные на курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Сертификатов выдано 8
Отзывы о курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Отзывов получено 2
Рейтинг курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Рейтинг курса 4.000
Уроки в курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Количество уроков 29
Тесты в курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Количество квизов 133
Задачи с кодом в курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Количество задач с кодом 39
Время прохождения курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Время прохождения курса
Стоимость курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Стоимость курса 8 990 ₽
Обновления курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Обновления курса
Дата публикации курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Дата публикации курса
Последнее обновление курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Последнее обновление
Сложность normal

Содержание курса

Разделы в курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark» 8 разделов Уроки в курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark» 29 уроков Тесты в курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark» 133 теста Задачи в курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark» 39 задач Время прохождения курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark» 4 ч. Последнее обновление курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark» обн. 28 января 2026

Введение в Data Engineering

4 урока
1. Введение в курс
2. Роль инженера данных
3. Обзор инструментов: Kafka, Airflow, Spark
4. Среда разработки и инструменты

Apache Kafka — основы

4 урока
1. Архитектура и ключевые понятия Kafka
2. Развёртывание и конфигурация Kafka
3. Управление топиками и партициями
4. Продюсеры и консюмеры

Apache Kafka — продвинутые темы

4 урока
1. Модели доставки и группы консюмеров
2. Streams API
3. Connect API
4. Тюнинг и масштабирование Kafka

Apache Airflow — основы

4 урока
1. Концепция DAG и организация кодовой базы
2. Операторы и сенсоры
3. Планирование и параметры DAG
4. Переменные, подключения и XCom

Apache Airflow — продвинутые возможности

4 урока
1. Управление зависимостями и надёжность
2. Пользовательские операторы, сенсоры и плагины в Airflow
3. Интеграция Airflow с внешними сервисами
4. Мониторинг, интерфейс Airflow и best practices

Apache Spark — основы

4 урока
1. Архитектура Apache Spark и RDD
2. Spark SQL, DataFrame и Dataset
3. Join’ы и перекос данных: производительность без магии
4. Lakehouse с Delta/Iceberg: upsert, compaction, time-travel

Apache Spark — потоковая обработка и интеграция с Kafk

4 урока
1. Введение в Structured Streaming
2. Чтение и запись данных из Kafka
3. Оконные операции и управление временем
4. Stateful-операции и stream-static join

Проектный модуль: end‑to‑end пайплайн

1 урок
1. Итоговый проект: построение пайплайна