Курс на Stepik
Обложка курса «Стажировка Data Engineer | Осенний поток 2025» на Stepik
44 990 ₽

Стажировка Data Engineer | Осенний поток 2025 5.000

Открыть на
STEPIK.ORG

Практическая стажировка «Data Engineer с нуля до middle» поможет получить реальные навыки работы с данными и подготовиться к трудоустройству. Вы научитесь работать с базами данных (SQL, NoSQL), строить и оптимизировать ETL-пайплайны, обрабатывать данные с использованием Docker, Pandas, Hive, PySpark, Kafka и Airflow. Вас ждёт работа в команде, 15 вебинаров, поддержка кураторов и финальная защита проекта. Стажировка подходит тем, кто хочет перейти на позицию Middle Data Engineer.

Показатель Текущие показатели Рост
Значение 🏆 Рейтинг 3 дн 7 дн 30 дн
Количество учеников на курсе «Стажировка Data Engineer | Осенний поток 2025»Учеников на курсе 61
Сертификаты, выданные на курсе «Стажировка Data Engineer | Осенний поток 2025»Сертификатов выдано 59
Отзывы о курсе «Стажировка Data Engineer | Осенний поток 2025»Отзывов получено 3
Рейтинг курса «Стажировка Data Engineer | Осенний поток 2025»Рейтинг курса 5.000
Уроки в курсе «Стажировка Data Engineer | Осенний поток 2025»Количество уроков 86
Тесты в курсе «Стажировка Data Engineer | Осенний поток 2025»Количество квизов 284
Задачи с кодом в курсе «Стажировка Data Engineer | Осенний поток 2025»Количество задач с кодом 11
Время прохождения курса «Стажировка Data Engineer | Осенний поток 2025»Время прохождения курса
Стоимость курса «Стажировка Data Engineer | Осенний поток 2025»Стоимость курса 44 990 ₽
Обновления курса «Стажировка Data Engineer | Осенний поток 2025»Обновления курса
Дата публикации курса «Стажировка Data Engineer | Осенний поток 2025»Дата публикации курса
Последнее обновление курса «Стажировка Data Engineer | Осенний поток 2025»Последнее обновление
Сложность easy

Содержание курса

Разделы в курсе «Стажировка Data Engineer | Осенний поток 2025» 15 разделов Уроки в курсе «Стажировка Data Engineer | Осенний поток 2025» 86 уроков Тесты в курсе «Стажировка Data Engineer | Осенний поток 2025» 284 теста Задачи в курсе «Стажировка Data Engineer | Осенний поток 2025» 11 задач Время прохождения курса «Стажировка Data Engineer | Осенний поток 2025» 11 ч. Последнее обновление курса «Стажировка Data Engineer | Осенний поток 2025» обн. 15 июня 2026

Первые действия

2 урока
1. Купили, что дальше?
2. Телеграмм каналы

Организация работы

6 уроков
1. Цели стажировки
2. Знакомство с преподавателями
3. Расписание стажировки
4. Вводное тестирование. Часть 1.
5. Вводное тестирование. Часть 2.
6. Вебинар | Первые действия и организация работы

Введение в проектную работу

4 урока
1. Как строится работа в команде на стажировке + теория GIT
2. Кто и почему проверяет задания?
3. Вебинары | Введение в проектную работу
4. Задание. Создание личных и командных репозиториев

Работа с базами данных

10 уроков
1. Образ, который нам понадобится
2. Задание. Работа с PostgreSQL
3. Задание. Работа с Clickhouse
4. Самостоятельные задания на определение движка таблиц
5. Вебинары | Работа с базами данных
6. Что такое NoSQL и в чем его суть?
7. Задание. Работа с NoSQL
8. Репликация NoSQL
9. Работа с Trino
10. Вебинар | Работа с базами данных

Потоковая обработка данных + настройка алертов

6 уроков
1. Введение в streaming
2. Задание. Kafka против дубликатов
3. Аларм!
4. Что такое Debezium?
5. Stateful и Stateless. Введение в Spark Streaming
6. Вебинары | Обсуждение задач Kafka

Батчевая обработка данных + настройка grafana

6 уроков
1. Что такое HDFS? Особенности.
2. Самостоятельное задание на работу с HDFS/BASH
3. Объектные хранилища: что это и как с ними работать?
4. Создание дашбордов Grafana и основные метрики проверки данных
5. Задание. Объектное хранилище - расширение функционала клиента.
6. Вебинары | Строим ETL процессы и настраиваем мониторинг

Работа с инструментами Big Data

13 уроков
1. Что такое Hive? Особенности
2. Что такое Iceberg? Slowly Changing Dimensions.
3. Вебинар | Работаем с HDFS/HIVE
4. Установка Spark, архитектура и структуры
5. Что такое преобразования в RDD?
6. Что такое действия в RDD?
7. Что такое преобразования и действия в Dataframe?
8. SparkSQL on Dataframes
9. Вебинар | Работаем с PySparkSQL
10. Работа с функциями PySpark
11. Практика PySpark
12. Задание. Финалим работу с PySpark
13. Вебинары | Работаем с PySpark

Практическое изучение Airflow

7 уроков
1. Введение в оркестрацию данных!
2. Что такое переменные и таски? Виды тасок
3. Что такое connections, xcom, sensors?
4. Вебинары | Практика Airflow
5. Задание. Реализация генератора DAGs
6. Миграция больших данных
7. Вебинар | Задача миграции

Знакомство с парсингом, очистка и загрузка данных

6 уроков
1. Парсинг: введение
2. Requests, BeautifulSoup
3. Задание. Разработка простого парсера.
4. Scrapy, Selenium
5. Задание. Разработка продвинутого парсера.
6. Вебинары | Парсинг

Реализация итогового проекта и его защита

5 уроков
1. Резюмируем вышесказанное
2. Вебинар | Обсуждение заданий итоговых проектов
3. Закрытый итоговый проект №1. Пикча
4. Открытый итоговый проект №2. Система миграции данных
5. Вебинар | Публичная защита проектов

Дальнейшее трудоустройство

1 урок
1. Вебинар | Обсуждение трудоустройства

Инженерный модуль

2 урока
1. Что такое VM, Docker
2. Что такое K8S?

Основы DBT

9 уроков
1. Что такое DBT
2. Установка dbt
3. Основные команды dbt
4. Промежуточное тестирование
5. Jinja-шаблонизация
6. Jinja часть 2
7. Jinja часть 3
8. Оптимизация
9. Итоговое задание

Основы работы с Data Science

4 урока
1. Что такое AI/ML/DL? Зачем дата инженеру это знать?
2. Знакомство с FeatureStore
3. Знакомство с MLflow
4. Как нейросети могут помочь DE, а в каком случае только навредят?

Основы DWH/DataLake

5 уроков
1. Введение в DWH
2. DataVault 2.0 vs якорная модель
3. Схема звезды vs схема снежинки
4. Введение в DataLake
5. Практическое построение DWH на базе Clickhouse