Курс на Stepik
Обложка курса «Hadoop. Система для обработки больших объемов данных» на Stepik
Бесплатно

Hadoop. Система для обработки больших объемов данных 4.793

Открыть на
STEPIK.ORG

Курс посвящен методам обработки BigData с помощью системы Hadoop. После прохождения курса вы получите знания основных способов хранения и методов обработки больших объемов данных, поймете принципы работы распределенных систем в контексте фреймворка Hadoop и освоите практические навыки разработки приложений, используя программную модель MapReduce.

Показатель Текущие показатели Рост
Значение 🏆 Рейтинг 3 дн 7 дн 30 дн
Количество учеников на курсе «Hadoop. Система для обработки больших объемов данных»Учеников на курсе 50 359
Сертификаты, выданные на курсе «Hadoop. Система для обработки больших объемов данных»Сертификатов выдано 3 866
Отзывы о курсе «Hadoop. Система для обработки больших объемов данных»Отзывов получено 271
Рейтинг курса «Hadoop. Система для обработки больших объемов данных»Рейтинг курса 4.793
Уроки в курсе «Hadoop. Система для обработки больших объемов данных»Количество уроков 33
Тесты в курсе «Hadoop. Система для обработки больших объемов данных»Количество квизов 219
Задачи с кодом в курсе «Hadoop. Система для обработки больших объемов данных»Количество задач с кодом 29
Время прохождения курса «Hadoop. Система для обработки больших объемов данных»Время прохождения курса
Обновления курса «Hadoop. Система для обработки больших объемов данных»Обновления курса
Дата публикации курса «Hadoop. Система для обработки больших объемов данных»Дата публикации курса
Последнее обновление курса «Hadoop. Система для обработки больших объемов данных»Последнее обновление

Содержание курса

Разделы в курсе «Hadoop. Система для обработки больших объемов данных» 9 разделов Уроки в курсе «Hadoop. Система для обработки больших объемов данных» 33 урока Тесты в курсе «Hadoop. Система для обработки больших объемов данных» 219 тестов Задачи в курсе «Hadoop. Система для обработки больших объемов данных» 29 задач Время прохождения курса «Hadoop. Система для обработки больших объемов данных» 17 ч. Последнее обновление курса «Hadoop. Система для обработки больших объемов данных» обн. 1 год назад

Введение

2 урока
1. Вводный урок курса
2. Что такое Hadoop?

Распределенная файловая система HDFS

3 урока
1. Архитектура HDFS
2. Shell-команды
3. Java API

MapReduce. Введение

5 уроков
1. Парадигма MapReduce
2. Фреймворк MapReduce
3. Java API. Введение
4. Java API. Продолжение
5. Hadoop Streaming

Решение задач с помощью MapReduce

3 урока
1. Алгоритмы на MapReduce
2. Реляционные функции
3. Расчет TF-IDF

Алгоритмы на графах в MapReduce

4 урока
1. Графы в MapReduce
2. Поиск кратчайшего пути в графе
3. PageRank
4. Проблемы MR-алгоритмов на графах

Pig и Hive

4 урока
1. Pig
2. Основные операторы PigLatin
3. Hive
4. Pig vs Hive

NoSQL базы данных: HBase и Cassandra

5 уроков
1. Способы хранения данных
2. NoSQL
3. Введение в HBase
4. Архитектура HBase
5. Cassandra

Spark

3 урока
1. Основные понятия Spark
2. Операторы Spark
3. Фреймворк Spark

YARN. MapReduce 2.0

4 урока
1. Что такое YARN?
2. Компоненты YARN
3. MapReduce 2.0
4. Заключительный урок