Несколько дней новогоднего волшебства:
Успейте начать обучение в 2018-ом году со скидкой до 30%!
Выбрать курс

Data Engineer

Что даст вам этот курс
19
0
Курс "Data Engineer" предназначен для тех, кому по своей работе необходимо заниматься организацией и предобработкой данных для разных групп пользователей: конечные клиенты, аналитики, data scientists, менеджеры.

Длительность курса: 3 месяца

Выпускной проект: реализация задачи по выбранной тематике с применением парадигмы Map-Reduce кластере в виде pipeline (Kafka, Spark, Hadoop экосистема) и визуализация результатов.
Программа обучения
Модуль 1
Введение в большие данные
Модуль 2
Хранение больших данных
Модуль 3
Инструменты работы с большими данными
Модуль 4
Потоковая обработка больших данных
Модуль 5
Pipelines
Модуль 6
Представление и визуализация больших данных
Модуль 7
Проектная работа
Введение в большие данные
1.1. Предпосылки
1.2. Ключевые характеристики
1.3. Основные сферы применения
1.4. Hadoop экосистема
Оценить модуль
8
2
Хранение больших данных
2.1. HDFS
2.2. NoSQL БД (Cassandra и HBase)
2.3. Hadoop кластер.
Оценить модуль
10
0
Инструменты работы с большими данными
3.1. Парадигма Map-Reduce
3.2. YARN
3.3. Apache Spark
3.4. Hive
Оценить модуль
5
4
Потоковая обработка больших данных
4.1. Apache Flink
4.2. Apache Spark Streaming
4.3. Лямбда-архитектура
4.4. Kafka
Оценить модуль
5
3
Pipelines
5.1. Организация пайплайна, способы выстраивать поток задач, обеспечение их выполнения.
5.2. Отказоустойчивость, мониторинг работы пайплайна.
5.3. Spark ML, Apache Beam.
5.4. Оркестрирование пайплайнов (Airflow, Azkaban)
Оценить модуль
5
3
Представление и визуализация больших данных
6.1. Power BI
6.2. Tableau
6.3. Apache Zeppelin
Оценить модуль
5
3
Проектная работа
Заключительная часть курса посвящена проектной работе.
В процессе написания/выбора темы можно получить консультации у преподавателей.




Оценить модуль
0
0
Выпускной проект
Заключительная часть курса посвящена проектной работе.
В процессе написания/выбора темы можно получить консультации у преподавателей.




Опрос по программе "Data Engineer"

При запуске нового курса, нам очень важно оценивать качество и актуальность предлагаемой программы на этапе идеи и концепции модулей, поэтому мы будем очень рады и благодарны вашим ответам, экспертным оценкам и комментариям.

Вопрос №1 из 7
Ваше имя и фамилия
Вопрос №2 из 7
Выберите один вариант ответа
Вам понятно, о чем этот курс?
оцените от 1 (не понял) до 5 (да, все ясно)
Вопрос №3 из 7
Выберите один вариант ответа
Является ли этот курс интересным лично для вас?
оцените от 1 (совсем не интересно) до 5 (круто, интересно, я бы пошел)
Вопрос №4 из 7
Выберите один вариант ответа
Как вы думаете, будет ли этот курс востребован на рынке?
оцените от 1 (совсем не интересно) до 5 (да, думаю, людям понравится)
Вопрос №5 из 7
Выберите один вариант ответа
Как вы оцениваете актуальность такой программы?
оцените от 1 (категорически устарела) до 5 (современная или даже на хайпе)
Вопрос №6 из 7
Выберите один вариант ответа
Можно ли реализовать в рамках курса предложенные идеи проекта?
оцените от 1 (не сработает, идея нерабочая) до 5 (да, проект получится отличный и полезный)
Вопрос №7 из 7
Комментарии и предложения - мы всегда им рады!