Курс на Stepik
Обложка курса «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке» на Stepik
35 000 ₽

DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке 0.000

Открыть на
STEPIK.ORG

Живой практикум по Data Engineering: поднимаем локальный кластер (Spark + Postgres + Jupyter + Airflow), строим слои RAW/STG/CORE на реальном датасете и разбираем паттерны middle-уровня. Формат потока: небольшая группа, плотная поддержка и доработка курса по вашей обратной связи.

Показатель Текущие показатели Рост
Значение 🏆 Рейтинг 3 дн 7 дн 30 дн
Количество учеников на курсе «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке»Учеников на курсе 29
Сертификаты, выданные на курсе «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке»Сертификатов выдано 0
Отзывы о курсе «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке»Отзывов получено 0
Рейтинг курса «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке»Рейтинг курса 0.000
Уроки в курсе «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке»Количество уроков 45
Тесты в курсе «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке»Количество квизов 329
Задачи с кодом в курсе «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке»Количество задач с кодом 6
Время прохождения курса «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке»Время прохождения курса
Стоимость курса «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке»Стоимость курса 35 000 ₽
Обновления курса «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке»Обновления курса
Дата публикации курса «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке»Дата публикации курса
Последнее обновление курса «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке»Последнее обновление
Сложность normal

Содержание курса

Разделы в курсе «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке» 11 разделов Уроки в курсе «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке» 45 уроков Тесты в курсе «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке» 329 тестов Задачи в курсе «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке» 6 задач Время прохождения курса «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке» 1 ч. Последнее обновление курса «DE-практикум: Spark, Docker, Postgres локально у вас на ноутбуке» обн. 25 мая 2026

Введение

2 урока
1. Добро пожаловать
2. Важно

Окружение: Docker-стенд, проверка сервисов

5 уроков
1. Как проходить практикум через Stepik + Git
2. Как устроен практикум и репозиторий
3. Установка инструментов
4. Репозиторий и правила работы с файлами
5. Первый запуск стенда и проверка сервисов

RAW → STG: загрузка датасетов, идемпотентность

4 урока
1. RAW и ingest_date
2. Загрузка orders в STG через replace-by-date
3. order_items и проверки связности
4. Остальные таблицы и проверка идемпотентности

Моделирование CORE: факты/измерения, event-даты, инкременты

5 уроков
1. Зачем нужен CORE и что такое факт/измерения
2. Первые измерения CORE и полный загрузочный прогон (SCD1)
3. core.dim_customer как SCD2: история адресов клиента
4. Первый факт CORE: core.fct_order_items
5. Data Quality в CORE: что проверить в фактах и измерениях

Основы Spark

1 урок
1. В разработке

Витрины: денормализация, партиционирование

1 урок
1. В разработке

Качество и SLA: дубликаты, пропуски, аномалии

1 урок
1. В разработке

Spark Batch: трансформации, партиционирование, оптимизация

1 урок
1. В разработке

Оркестрация (Airflow): DAG raw→stg→core→marts

1 урок
1. В разработке

Метрики пайплайнов, алерты

1 урок
1. В разработке

SQL-оптимизация: планы, индексы, анти-паттерны

1 урок
1. В разработке