Курс дает общие представления о системе Hadoop и Spark, также затрагивается формат ORC. Практики нет, только несколько вопросов для закрепления материала. В чем-то курс наверняка будет полезен. Я, например, узнал, что технология Data Lakehouse является развитием Data Lake, а Spark - развитием MapReduce.
Бесплатно
Распределённые системы хранения, обработки данных: Hadoop, Spark
Открыть наSTEPIK.ORG
Погрузитесь в мир больших данных: от основ Hadoop и HDFS до продвинутой оптимизации запросов с помощью формата ORC. Курс проведёт вас через всю экосистему Hadoop — от распределённого хранения (HDFS) и управления ресурсами (YARN) до модели обработки MapReduce и её эволюции в Apache Spark. Вы узнаете, как Hive превращает сложные MapReduce-задачи в простые SQL-запросы, а главное — как формат ORC с его колоночным хранением, встроенными индексами и фильтрами Блума ускоряет работу с данными в десятки раз.
| Показатель | Текущие показатели | Рост | |||
|---|---|---|---|---|---|
| Значение | 🏆 Рейтинг | 3 дн | 7 дн | 30 дн | |
| 167 | |||||
| 0 | |||||
| 3 | |||||
| 5.000 | |||||
| 13 | |||||
| 19 | |||||
| — | |||||
| — | — | ||||
| — | — | — | — | ||
| — | — | — | — | ||