Big Data Technologies. Лекция 11. Spark Streaming

Описание к видео Big Data Technologies. Лекция 11. Spark Streaming

Курс НИЯУ МИФИ "Технологии обработки Больших Данных".
Курсы НИЯУ МИФИ на платформе Открытое образование: https://openedu.ru/university/mephi/

Содержание:
Поточная обработка данных
Отличия пакетной и поточной обработки данных
Сценарии использования поточной обработки
Фреймворк Spark Streaming
Микропакетная архитектура обработки данных
Модель программирования Spark Streaming
Интервалы (между блоками, между пакетами)
Структура Spark Streaming-приложения
Обработка потока на примере WordCount
Оконные операции

Комментарии

Информация по комментариям в разработке