Как на Spark Structured Streaming работать
с данными в HDFS и Kafka?

Бесплатный вебинар, приуроченный к старту курса «Spark Developer»

• Какие источники данных могут быть обработаны стриминговым API Spark (Рассмотрим кокретные примеры с данными на HDFS и Kafka).
• Как осуществить подключение к таким источникам
• Как группировать данные

На вебинаре разберем:

Этот вебинар будет полезен

Начинающим и специалистам в области аналитики данных, Data Engeneering

• Понимание концепции возможностей Streaming API Spark
• Умение подключаться к источникам данных и работа в режиме, приближенном к реальному времени.

На вебинаре узнаете:

Спикер

Первый раз познакомился с вычислительной техникой 30 лет назад в далеком 1993 году. С тех пор с разной степенью вовлеченности в ИТ-процесс занимался организацией вычислительных сетей, серверных помещений - центров обработки данных.

Был как простым специалистом, так и руководителем большого структурного подразделения служб ИТ регионального масштаба. Однако на протяжении всего времени так или иначе неразрывно связан с автоматизацией, программированием, построением архитектурных решений.

В 2002 году познакомился с Java, и с тех пор работает с технологиями на базе JVM. С 2021 года активно увлекся большими данными, чем и занят по настоящее время.

Андрей Чучалов

В 2022 году окончил курс на OTUS по программе Data-engineer.