Курс на Stepik
Обложка курса «Data Engineer — как построить надежное хранилище для бизнеса» на Stepik
Бесплатно

Data Engineer — как построить надежное хранилище для бизнеса 2.500

Открыть на
STEPIK.ORG

Цель данного курса изучить принципы построения надежного хранилища данных (Data Warehouse(DWH) / Data Lake / Lakehouse), а также освоить практические подходы к разработке инфраструктуры обработки данных :3

Показатель Текущие показатели Рост
Значение 🏆 Рейтинг 3 дн 7 дн 30 дн
Количество учеников на курсе «Data Engineer — как построить надежное хранилище для бизнеса»Учеников на курсе 202
Сертификаты, выданные на курсе «Data Engineer — как построить надежное хранилище для бизнеса»Сертификатов выдано 0
Отзывы о курсе «Data Engineer — как построить надежное хранилище для бизнеса»Отзывов получено 2
Рейтинг курса «Data Engineer — как построить надежное хранилище для бизнеса»Рейтинг курса 2.500
Уроки в курсе «Data Engineer — как построить надежное хранилище для бизнеса»Количество уроков 33
Тесты в курсе «Data Engineer — как построить надежное хранилище для бизнеса»Количество квизов 19
Время прохождения курса «Data Engineer — как построить надежное хранилище для бизнеса»Время прохождения курса
Обновления курса «Data Engineer — как построить надежное хранилище для бизнеса»Обновления курса
Дата публикации курса «Data Engineer — как построить надежное хранилище для бизнеса»Дата публикации курса
Последнее обновление курса «Data Engineer — как построить надежное хранилище для бизнеса»Последнее обновление
Сложность hard

Содержание курса

Разделы в курсе «Data Engineer — как построить надежное хранилище для бизнеса» 11 разделов Уроки в курсе «Data Engineer — как построить надежное хранилище для бизнеса» 33 урока Тесты в курсе «Data Engineer — как построить надежное хранилище для бизнеса» 19 тестов Время прохождения курса «Data Engineer — как построить надежное хранилище для бизнеса» 2 ч. Последнее обновление курса «Data Engineer — как построить надежное хранилище для бизнеса» обн. 29 мая 2026

Введение

6 уроков
1. Пояснительная по курсу
2. Тематический план
3. Краткое описание модулей
4. Критерии оценивания
5. Методический материал и литература
6. Необходимое оборудование и требования к курсу

Какие бывают хранилища данных

2 урока
1. Основные типы хранилищ
2. Слои хранилища

Как обрабатывать данные

3 урока
1. ETL (Extract, Transform, Load)
2. ELT (Extract, Load, Transform)
3. Разница между ETL и ELT

Оркестрация - что это значит?

3 урока
1. Планировщики задач
2. DAG (Directed Acyclic Graph)
3. Инструменты типа Airflow

Как обеспечить надежность и отказоустойчивость

2 урока
1. Основные принципы
2. Обработка ошибок

Как обеспечить качество данных?

3 урока
1. Тесты данных (например, в dbt)
2. Data profiling
3. SLA по данным

Как хранить данные?

2 урока
1. Базы данных и хранилища
2. Инструменты Data Engineer

Как обеспечить масштабируемость данных когда их очень много?

3 урока
1. Горизонтальное масштабирование
2. Вертикальное масштабирование
3. Партиционирование

Как обеспечить безопасность данных?

4 урока
1. Контроль доступа (RBAC)
2. Шифрование данных
3. Аудит действий пользователей
4. Соответствие требованиям (GDPR и др.)

Практическая часть

4 урока
1. Построение ETL/ELT пайплайна
2. Создание витрин данных
3. Настройка оркестрации
4. Реализация проверок качества данных

Выводы

1 урок
1. Советы и выводы