Big Data Technologies. Лекция 9. Выполнение SparkRDD-программ

Описание к видео Big Data Technologies. Лекция 9. Выполнение SparkRDD-программ

Курс НИЯУ МИФИ "Технологии обработки Больших Данных".
Курсы НИЯУ МИФИ на платформе Открытое образование: https://openedu.ru/university/mephi/

Содержание:
Операции над RDD (трансформации и действия)
Типы зависимостей RDD: Narrow и Wide
Shuffle и операции его вызывающие
Программа WordCount на Spark RDD
Типы узлов Spark-кластера
SparkContext, Job, Task, Stage
Планирование выполнения Spark Job, DAGScheduler

Комментарии

Информация по комментариям в разработке