Курс на Stepik
Обложка курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark» на Stepik
8 990 ₽

Data Engineering Fast‑Track: Kafka → Airflow → Spark ★ 4.000

Открыть на
STEPIK.ORG

Практический fast-track по data engineering: за 4–6 недель собираем рабочий конвейер Kafka → Spark → Lakehouse под управлением Airflow. Разберём batch и streaming, окна и watermark, схемы и контракты. Мини‑проекты, Docker Compose, шаблоны DAG и пайплайнов. Курс подойдёт инженерам, аналитикам и тем, кто хочет освоить современные пайплайны данных с уверенным Python.

Показатель Текущие показатели Рост
Значение 🏆 Рейтинг 3 дн 7 дн 30 дн
Количество учеников на курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Учеников на курсе 163
Сертификаты, выданные на курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Сертификатов выдано 8
Отзывы о курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Отзывов получено 2
Рейтинг курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Рейтинг курса 4.000
Уроки в курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Количество уроков 29
Тесты в курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Количество квизов 133
Задачи с кодом в курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Количество задач с кодом 39
Время прохождения курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Время прохождения курса —
Стоимость курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Стоимость курса 8 990 ₽ —
Обновления курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Обновления курса — —
Дата публикации курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Дата публикации курса — ———
Последнее обновление курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark»Последнее обновление — ———
Сложность normal — ———

Содержание курса

Разделы в курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark» 8 разделов Уроки в курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark» 29 уроков Тесты в курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark» 133 теста Задачи в курсе «Data Engineering Fast‑Track: Kafka → Airflow → Spark» 39 задач Время прохождения курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark» 4 ч. Последнее обновление курса «Data Engineering Fast‑Track: Kafka → Airflow → Spark» обн. 28 января 2026

Введение в Data Engineering

4 урока
1. Введение в курс ↗
2. Роль инженера данных ↗
3. Обзор инструментов: Kafka, Airflow, Spark ↗
4. Среда разработки и инструменты ↗

Apache Kafka — основы

4 урока
1. Архитектура и ключевые понятия Kafka ↗
2. Развёртывание и конфигурация Kafka ↗
3. Управление топиками и партициями ↗
4. Продюсеры и консюмеры ↗

Apache Kafka — продвинутые темы

4 урока
1. Модели доставки и группы консюмеров ↗
2. Streams API ↗
3. Connect API ↗
4. Тюнинг и масштабирование Kafka ↗

Apache Airflow — основы

4 урока
1. Концепция DAG и организация кодовой базы ↗
2. Операторы и сенсоры ↗
3. Планирование и параметры DAG ↗
4. Переменные, подключения и XCom ↗

Apache Airflow — продвинутые возможности

4 урока
1. Управление зависимостями и надёжность ↗
2. Пользовательские операторы, сенсоры и плагины в Airflow ↗
3. Интеграция Airflow с внешними сервисами ↗
4. Мониторинг, интерфейс Airflow и best practices ↗

Apache Spark — основы

4 урока
1. Архитектура Apache Spark и RDD ↗
2. Spark SQL, DataFrame и Dataset ↗
3. Join’ы и перекос данных: производительность без магии ↗
4. Lakehouse с Delta/Iceberg: upsert, compaction, time-travel ↗

Apache Spark — потоковая обработка и интеграция с Kafk

4 урока
1. Введение в Structured Streaming ↗
2. Чтение и запись данных из Kafka ↗
3. Оконные операции и управление временем ↗
4. Stateful-операции и stream-static join ↗

Проектный модуль: end‑to‑end пайплайн

1 урок
1. Итоговый проект: построение пайплайна ↗