Специализация Data Engineer | OTUS

Курсы

Программирование
iOS Developer. Basic
-23%
Python Developer. Professional
-13%
Golang Developer. Professional
-17%
Python Developer. Basic
-16%
iOS Developer. Professional
-13%
C# ASP.NET Core разработчик
-18%
Unity Game Developer. Professional
-11%
React.js Developer
-12%
Android Developer. Professional
-7%
Software Architect
-12%
C++ Developer. Professional
-8%
Разработчик C#
-8%
Backend-разработчик на PHP
-8%
Архитектура и шаблоны проектирования
-12%
Программист С Разработчик на Spring Framework MS SQL Server Developer AWS для разработчиков Cloud Solution Architecture Разработчик голосовых ассистентов и чат-ботов Vue.js разработчик VOIP инженер Нереляционные базы данных Супер - интенсив по паттернам проектирования Супер-практикум по использованию и настройке GIT IoT-разработчик Advanced Fullstack JavaScript developer Супер-интенсив Azure
Инфраструктура
Мониторинг и логирование: Zabbix, Prometheus, ELK
-17%
DevOps практики и инструменты
-18%
Архитектор сетей
-21%
Инфраструктурная платформа на основе Kubernetes
-22%
Супер-интенсив «IaC Ansible»
-16%
Супер-интенсив по управлению миграциями (DBVC)
-16%
Administrator Linux. Professional
-5%
Administrator Linux.Basic
-10%
Супер-интенсив «ELK»
-10%
Базы данных Сетевой инженер AWS для разработчиков Cloud Solution Architecture Разработчик голосовых ассистентов и чат-ботов Внедрение и работа в DevSecOps Супер-практикум по работе с протоколом BGP Супер - интенсив по паттернам проектирования Супер - интенсив по Kubernetes Супер-интенсив «СУБД в высоконагруженных системах»
Специализации Курсы в разработке Подготовительные курсы
+7 499 938-92-02

Специализация

2 курса по выгодной цене

Специализация Data Engineer

Специализация Data Engineer

Data Engineer

После обучения Data Engineering вы станете востребованным специалистом, который:

  • - разворачивает, налаживает и оптимизирует инструменты обработки данных

  • - адаптирует датасеты для дальнейшей работы и аналитики

  • - создает сервисы, которые используют результаты обработки больших объемов данных

  • - отвечает за архитектуру данных в компании



Выпускной проект: реализация задачи по выбранной тематике в реальном времени с применением парадигмы Map-Reduce кластере в виде pipeline (Kafka, Spark, Hadoop экосистема) и визуализация результатов.

Список возможных тем проектов будет предложен. Также можно взять задачу "с работы" или близкого себе проекта.
Подробнее о курсе

Экосистема Hadoop, Spark, Hive

Чему вы научитесь после курса?:

  • - Использовать Hadoop для обработки данных;

  • - Взаимодействовать с его компонентами через консольные клиенты и API;

  • - Работать со слабоструктурированными данными в Hive;

  • - Писать и оптимизировать приложения на Spark;

  • - Писать тесты для Spark-приложений;

  • - Использовать Spark для обработки табличных, потоковых, гео-данных и даже графов;

  • - Настраивать CI и мониторинг Spark-приложений.



В качестве выпускного проекта будет построена ETL-система на основе Hadoop, включающая в себя:

- Загрузку данных из источников
- Простой Data Lake на основе этих данных с использованием Hive
- Лямбда-архитектуру для реалтайм-аналитики на основе Spark
Подробнее о курсе

Формат обучения

Учитесь из любой точки мира

Удобный формат занятия позволяет учиться в любом месте, где есть доступ в интернет

Совмещайте обучение с работой

Совмещать обучение с работой просто. Вебинары начинаются в 20:00 МСК и длятся два академических часа. Также вы получаете всего одно домашнее задание в неделю.

Общайтесь в Live-режиме с преподавателями

Занятия проводятся в формате онлайн-вебинаров. Ведите живой диалог с преподавателем

Пройти бесплатное тестирование

Это поможет понять, насколько курс подходит именно вам.

Сертификаты

Вы получите сертификат для каждого курса, который входит в программу обучения, а также удостоверение о повышении квалификации.

Пройти бесплатное тестирование

Это поможет понять, насколько курс подходит именно вам.