DWH на основе Arenadata
14 мая
4 месяца
Онлайн
Вт/Пт 20:00 Мск
Для кого этот курс?
- Системные аналитики, bi-аналитики и аналитики данных, которые хотят освоить новые знания по инженерии данных, необходимые для современного аналитика, освоить практики построения end-to-end аналитических решений
- Специалисты из других областей, которые хотят совершить карьерный переход, найти работу на ролях DWH аналитика/Инженера данных.
Необходимые знания
- Базовые знания Python
- Базовая математическая подготовка
Что даст вам этот курс
После окончания курса вы сможете:
- Применять языки SQL и Python для анализа данных и работы с DWH
- Проектировать архитектуру DWH (выделять слои данных, выбирать наиболее подходящую методологию моделирования данных для каждого из слоев хранилища)
- Создавать и автоматизировать ETL-пайплайны для загрузки данных в хранилище
Вы освоите стек технологий:
- Arenadata.DB
- Arenadata.Hadoop
- Arenadata.Streaming
- Arenadata.Cluster Manager
- SQL и СУБД
- Автоматизация ETL-процессов
- Проектирование DWH
Процесс обучения
Вебинары проводятся 2 раза в неделю по 2 ак. часа и сохраняются в записи в личном кабинете. Вы можете посмотреть их в любое удобное для вас время.
В ходе обучения вы будете выполнять домашние задания. Каждое из них посвящено одному из компонентов вашего выпускного проекта.
После выполнения всех домашних заданий вы получите готовый выпускной проект.
Оптимальная нагрузка
Возможность совмещать учебу с работойПортфолио
Индивидуальная разработка итоговой проектной работы Перспективы
Получите знания, которые помогут повысить вашу востребованность и доход
Трудоустройство
Многие студенты еще во время прохождения первой части программы находят или меняют работу, а к концу обучения могут претендовать на повышение в должности.
- Получите помощь с оформлением резюме, портфолио и сопроводительного письма
- Разместите свое резюме в базе OTUS и сможете получать приглашения на собеседования от партнеров
DWH
Формат обучения
Интерактивные вебинары
2 занятия по 2 ак.часа в неделю. Доступ к записям и материалам остается навсегда
Обратная связь
Домашние задания с поддержкой и обратной связью наших преподавателей помогут освоить изучаемые технологии
Активное комьюнити
Чат в Telegram для общения преподавателей и студентов
Программа
Введение
В этом модуле студенты познакомятся с понятием DWH и инженерии данных, узнают об экосистеме инженерии данных, архитетуре платформ данных, а также о ролях и карьерных возможностях в области построения и развития DWH.
Тема 1: Вводное занятие. Основные концепции и роли в DWH
Тема 2: DWH в архитектуре платформы данных
Тема 3: Экосистема DWH. Инструменты и технологии
Основы Python для инженерии данных
В этом модуле студенты познакомятся с основными возможностями языка Python и библиотеками для работы с данными, необходимыми для работы инженеру данных.
Тема 1: Обзор возможностей языка Python
Тема 2: Работа с файлами и файловой системой
Тема 3: Работа с сетью Интернет
Тема 4: Работа с базами данных
Тема 5: Разбор ДЗ по второму модулю
Реляционные и MPP СУБД
В этом модуле студенты познакомятся с различными типами СУБД, детально изучат архитектуру MPP СУБД на примере Arenadata DB, научатся обращаться к СУБД с использованием языка SQL.
Тема 1: Базы данных, системы управления БД, типы БД
Тема 2: Архитектура MPP СУБД на примере Arenadata DB
Тема 3: Взаимодействие с БД. Язык SQL
Тема 4: Оптимизация запросов
Тема 5: Разбор ДЗ по третьему модулю
Большие данные и NoSQL
В этом модуле студенты узнают о предпосылках к появлению NoSQL решений для работы с большими данными, о том, где и для чего в архитектуре DWH могут применяться такие решения, а также более детально рассмотрят принцип и инструменты для работы с ними.
Тема 1: Основы Hadoop
Тема 2: Hive. SQL для Hadoop
Тема 3: Основы Spark
Тема 4: Обработка потоковых данных
Тема 5: Разбор ДЗ по четвертому модулю
ETL и оркестрация
В этом модуле студенты узнают о том, что такое ETL и как этот подход применяется в DWH. Также в модуле будет подробно рассмотрен вопрос автоматизации ETL-пайплайнов с помощью популярного инструмента оркестрации задач Airflow.
Тема 1: Введение. Обзор инструментов
Тема 2: Apache Airflow. Основы
Тема 3: Apache Airflow. Продвинутый уровень
Тема 4: Разбор ДЗ по пятому модулю
Проектирование DWH
В этом модуле студенты научатся проектировать хранилища данных, применяя разные методологии проектирования.
Тема 1: Архитектура DWH
Тема 2: Методология Dimensional Modeling
Тема 3: Методология Data Vault
Тема 4: Методология Anchor Modeling
Проектная работа
В этом модуле студенты самостоятельно выполнят проектную работу, связанную с построением хранилища данных или близкой тематикой, применяя полученные в рамках курса знания
Тема 1: Выбор темы и организация проектной работы
Тема 2: Консультация по проектам и домашним заданиям
Тема 3: Защита проектных работ
Также вы можете получить полную программу, чтобы убедиться, что обучение вам подходит
Выпускной проект
Каждый курс завершается финальным проектом, который предстоит защитить перед преподавателями и командой. Вам будет, что обсудить на собеседовании!
Вы можете выбрать одну из предложенных преподавателем тем или реализовать свою идею.
Преподаватели
Эксперты-практики делятся опытом, разбирают кейсы студентов и дают развернутый фидбэк на домашние задания
Прошедшие
мероприятия
Корпоративное обучение для ваших сотрудников
- Курсы OTUS верифицированы крупными игроками ИТ-рынка и предлагают инструменты и практики, актуальные на данный момент
- Студенты работают в группах, могут получить консультации не только преподавателей, но и профессионального сообщества
- OTUS проверяет знания студентов перед стартом обучения и после его завершения
- Простой и удобный личный кабинет компании, в котором можно видеть статистику по обучению сотрудников
- Сертификат нашего выпускника за 5 лет стал гарантом качества знаний в обществе
- OTUS создал в IT более 120 курсов по 7 направлениям, линейка которых расширяется по 40-50 курсов в год
Сертификат о прохождении курса
OTUS осуществляет лицензированную образовательную деятельность.
В конце прохождения специализации вы получите сертификат OTUS и официальный диплом о получении новой специальности
После обучения вы:
- Получите материалы по пройденным занятиям (видеозаписи курса и дoполнительные материалы)
- Создадите свой проект, который поможет при прохождении собеседований
- Повысите свою ценность и конкурентоспособность как IT-специалист
- Получите сертификат об окончании курса
DWH на основе Arenadata
Стоимость в рассрочку
Стоимость указана для оплаты физическими лицами
вычета до 13% стоимости обучения. Оставьте заявку и менеджер вас проконсультирует
+7 499 938-92-02 бесплатно