BIG DATA WORKSHOP:
real-time обработка данных с использованием Spark и Kafka
Соотношение теории и практики 50/50
17 декабря 10:00-18:00
18 декабря 10.00- 14.00
Онлайн
Суперинтенсив
Стоимость курса - 41250 руб
Подписка на рассылку новостей ФПМИ МФТИ
Хотите быть в курсе предстоящих событий и новых программ?
Тогда подпишитесь на нашу рассылку.
Подписка на новости
Что такое real-time обработка больших данных и когда она нужна?
Real-time обработка данных - метод обработки данных, при которых данные обрабатываются небольшими порциями. Работа с каждой порцией занимает минимальное время, поэтому мы всегда имеем актуальный результат.

Отличными примерами real-time обработки больших данных являются потоковая передача данных, радиолокационные системы, рекомендательные системы и банкоматы, где немедленная обработка имеет решающее значение для правильной работы системы.
Для кого:
Data engineers и архитекторы BigData приложений, которые интересуются методами realtime-обработки данных
Разработчики из других сфер, которым интересно получить Best practices в области realtime-обработки данных
Предварительная подготовка:
знание Python, Scala или Java, SQL

Программа и результаты обучения:

Workshop. Realtime обработка данных с использованием Kafka | 17-18 декабря 2021
2 дня
10.00-18.00, 10.00- 14.00
12 ак.ч
Необходимые знания: Python, Java, базовый Git и Docker

Получите опыт работы с распределенным брокером событий Kafka
Научитесь строить приложения потоковой обработки данных с помощью Kafka Streams
Модуль 1 Основные концепции и архитектура Apache Kafka
Тема 1.  Что такое Kafka и что она умеет
Тема 2. Что такое потоковая архитектура и на что способны потоковые обработчики
Тема 3. Основные инструменты разработчика
Модуль 2 Kafka Streams API

Тема 4. Kafka Streams: основы и stateless трансформации. Конфигурация приложения
Тема 5. Трансформации с использованием локального состояния
Тема 6. Дуализм «поток—таблица» и табличные join-ы
Тема 7. Время и оконные операции
Модуль 1 Основные концепции и архитектура Apache Kafka
Тема 1.  Что такое Kafka и что она умеет
Тема 2. Что такое потоковая архитектура и на что способны потоковые обработчики
Тема 3. Основные инструменты разработчика
Модуль 2 Kafka Streams API
Тема 4. Kafka Streams: основы и stateless трансформации. Конфигурация приложения
Тема 5. Трансформации с использованием локального состояния
Тема 6. Дуализм «поток—таблица» и табличные join-ы
Тема 7. Время и оконные операции
Как проходит обучение:
Мастер-класс и лекция
Получите 100% полезную теоретическую
и практическую часть
Практические задания
На практике научитесь разрабатывать приложения обработки больших данных
Домашнее задание
Для закрепления навыков выполните домашнее задание
Удостоверение о повышении квалификации МФТИ
Получите удостоверение государственного образца при успешном выполнении заданий
Наши преподаватели
Олег Ивченко
Разработчик системы HJudge - системы автоматизирванного тестирования Hadoop-приложений, системный администратор инфраструктуры больших данных в группе Яндекс-CERN, преподаватель курсов по обработке больших данных в МФТИ, ВШЭ, ШАД, Harbour.Space
Арсений Ташоян
Инженер-разработчик Big Data & Machine Learning в Swisscom.
Кроме того ведёт лекции и семинары по Streaming Processing для студентов МФТИ.
Иван Пономарев
Технический лидер в компании КУРС. Более 15 лет работает в ИТ, пишет код и руководит проектами от доработки ERP-систем до построения систем мониторинга данных в интернете в реальном времени, кандидат физико-математических наук, доцент кафедры алгоритмов и технологий программирования МФТИ

Стоимость
2 дня
Realtime обработка данных с использованием Kafka
41250 руб

Предлагаем нашим слушателям рассрочку на оплату обучения
(только для физических лиц)
Условия рассрочки
По каждой из предлагаемых программ/курсов, имеется возможность оплаты обучения в рассрочку.

Условия рассрочки:

Полная стоимость обучения при использовании рассрочки не изменяется. Рассрочка беспроцентна, оформление рассрочки бесплатно.

Детали рассрочки описаны в оферте на каждую соответствующую программу/курс, в Приложении № 1 – График платежей.

В Графике платежей указаны контрольные даты, на которые слушателем суммарно за всё предшествующее такой дате время должна быть перечислена указанная в графике платежей соответствующая сумма, или превышающая её сумма (но не более полной стоимости обучения). Например:

  • Оплата через равные промежутки времени платежами одинакового размера
  • Оплата одним платежом в размере стоимости всего обучения

Все описанные варианты допустимы, если на каждую из обозначенных в графике платежей дат внесено платежей на сумму не меньше указанной.
Нажимая кнопку «Отправить», вы соглашаетесь с условиями обработки персональных данных
Факты о МФТИ - нам есть, чем гордиться!
Факт 1
МФТИ вошел в 50 лучших вузов мира по физике и в 100 лучших по математике по результатам рейтинга QS World University Rankings by Subject 2021
Факт 2
В общих рейтингах лучших университетов мира Times Higher Education и Quacquarelli Symonds МФТИ занимает первое место среди технических вузов России
Факт 3
Двенадцать выпускников МФТИ вошли в список Forbes
Факт 4
2 выпускника МФТИ стали Нобелевскими лауреатами по физике в 2010 году
Факт 5
Среди молодых IT-специалистов, окончивших вузы в 2014-2019 годах, самые высокие зарплаты - 230 тыс. рублей в месяц - у выпускников Московского физико-технического института. Таковы результаты ежегодного исследования, проведенного порталом Superjob
Расписание курсов ФПМИ МФТИ 2021/2022
Есть вопрос?
Напишите нам - ответим на вопросы, проведем бесплатную консультацию по обучению