Курс на Stepik
Обложка курса «Hadoop. Система для обработки больших объемов данных» на Stepik
Бесплатно

Hadoop. Система для обработки больших объемов данных ★ 4.793

Открыть на
STEPIK.ORG

Курс посвящен методам обработки BigData с помощью системы Hadoop. После прохождения курса вы получите знания основных способов хранения и методов обработки больших объемов данных, поймете принципы работы распределенных систем в контексте фреймворка Hadoop и освоите практические навыки разработки приложений, используя программную модель MapReduce.

Показатель Текущие показатели Рост
Значение 🏆 Рейтинг 3 дн 7 дн 30 дн
Количество учеников на курсе «Hadoop. Система для обработки больших объемов данных»Учеников на курсе 50 444
Сертификаты, выданные на курсе «Hadoop. Система для обработки больших объемов данных»Сертификатов выдано 3 866
Отзывы о курсе «Hadoop. Система для обработки больших объемов данных»Отзывов получено 271
Рейтинг курса «Hadoop. Система для обработки больших объемов данных»Рейтинг курса 4.793
Уроки в курсе «Hadoop. Система для обработки больших объемов данных»Количество уроков 33
Тесты в курсе «Hadoop. Система для обработки больших объемов данных»Количество квизов 219
Задачи с кодом в курсе «Hadoop. Система для обработки больших объемов данных»Количество задач с кодом 29
Время прохождения курса «Hadoop. Система для обработки больших объемов данных»Время прохождения курса —
Обновления курса «Hadoop. Система для обработки больших объемов данных»Обновления курса — —
Дата публикации курса «Hadoop. Система для обработки больших объемов данных»Дата публикации курса — ———
Последнее обновление курса «Hadoop. Система для обработки больших объемов данных»Последнее обновление — ———

Содержание курса

Разделы в курсе «Hadoop. Система для обработки больших объемов данных» 9 разделов Уроки в курсе «Hadoop. Система для обработки больших объемов данных» 33 урока Тесты в курсе «Hadoop. Система для обработки больших объемов данных» 219 тестов Задачи в курсе «Hadoop. Система для обработки больших объемов данных» 29 задач Время прохождения курса «Hadoop. Система для обработки больших объемов данных» 17 ч. Последнее обновление курса «Hadoop. Система для обработки больших объемов данных» обн. 1 год назад

Введение

2 урока
1. Вводный урок курса ↗
2. Что такое Hadoop? ↗

Распределенная файловая система HDFS

3 урока
1. Архитектура HDFS ↗
2. Shell-команды ↗
3. Java API ↗

MapReduce. Введение

5 уроков
1. Парадигма MapReduce ↗
2. Фреймворк MapReduce ↗
3. Java API. Введение ↗
4. Java API. Продолжение ↗
5. Hadoop Streaming ↗

Решение задач с помощью MapReduce

3 урока
1. Алгоритмы на MapReduce ↗
2. Реляционные функции ↗
3. Расчет TF-IDF ↗

Алгоритмы на графах в MapReduce

4 урока
1. Графы в MapReduce ↗
2. Поиск кратчайшего пути в графе ↗
3. PageRank ↗
4. Проблемы MR-алгоритмов на графах ↗

Pig и Hive

4 урока
1. Pig ↗
2. Основные операторы PigLatin ↗
3. Hive ↗
4. Pig vs Hive ↗

NoSQL базы данных: HBase и Cassandra

5 уроков
1. Способы хранения данных ↗
2. NoSQL ↗
3. Введение в HBase ↗
4. Архитектура HBase ↗
5. Cassandra ↗

Spark

3 урока
1. Основные понятия Spark ↗
2. Операторы Spark ↗
3. Фреймворк Spark ↗

YARN. MapReduce 2.0

4 урока
1. Что такое YARN? ↗
2. Компоненты YARN ↗
3. MapReduce 2.0 ↗
4. Заключительный урок ↗