Чему вы научитесь
- Поймёте, в каких задачах стоит рассмотреть Spark и что запускает вычисление.
- Попробуете выбрать строки и колонки, добавить расчётное поле.
- Отличите пропуск от нуля и найдёте строки с неполными данными.
- Исправите ошибку в последовательности преобразований.
- Соберёте два учебных отчёта и объясните, какие записи вошли в показатели.
О курсе
Для кого этот курс
Начальные требования
Основы Python: переменные, списки и простые функции. Знакомство с SQL полезно, но для этого вводного курса не обязательно.
Преподаватели курса
6
Как проходит обучение
Три раздела: знакомство и маршрут; практика на заказах магазина и обращениях службы поддержки; рабочие ситуации и следующий шаг. Четырнадцать уроков, десять задач на код и девять вопросов с автопроверкой.
Читайте короткий пример, затем пробуйте преобразование самостоятельно. Исходная таблица df и функции F уже подготовлены; сохраните ответ в result. Задания независимы друг от друга. Учебный модуль воспроизводит выбранные операции PySpark API; установка Spark или Docker не нужна.
После двух отчётов разберёте готовые показатели, повторяющиеся записи и объединение частичных результатов. Новые ситуации проверяются вопросами, а не дополнительной установкой программ. В конце отдельная страница расскажет о полном платном курсе и его открытых вводных уроках.
Что вы получите
- Первый опыт работы с DataFrame API
- Десять задач на код и девять вопросов с автопроверкой
- Два законченных учебных отчёта
- Понимание, подходит ли вам полный курс