Greenplum для разработчиков и архитекторов баз данных
31 марта
3 месяца
Онлайн
Пн/Ср 20:00 Мск
Курс будет интересен:
-
Data Engineer, Аналитикам данных, BI-разработчикам, которые хотят научиться эффективно использовать Greenlum в работе;
-
Архитекторам БД, которые все чаще сталкиваются с вопросом администрирования Greenlum;
-
Руководителям команд и компаний, менеджерам и CTO, которые планируют выстраивать архитектуру, инфраструктуру, оптимизировать производительность БД и грамотно управлять рисками в масштабных проектах;
-
Бекенд-разработчикам, которые хотят научиться грамотно организовать работу БД и повысить общую надежность системы.
Минимальные знания для прохождения курса:
- Базовые знания SQL
- Базовые знания и опыт работы с postgreSQL
- Опыт работы с all-up-system
- Понимание Linux
- Навыки работы с командной строкой
Чему вы научитесь на курсе:
- Изучите весь инструментарий и возможности с MPP-СУБД Greenplum;
- Изучите реальные кейс применения Greenplum;
- Разберете различия и преимущества Greenplum от postgreSQL и других MPP-СУБД
- Поймете куда двигаться дальше и что делать после того как Greenplum перестал быть open source продуктом.
Процесс обучения
Обучение проходит онлайн: вебинары, общение с преподавателями и вашей группой в Telegram, сдача домашних работ и получение обратной связи от преподавателя.
Вебинары проводятся 2 раза в неделю по 2 ак. часа и сохраняются в записи в личном кабинете. Вы можете посмотреть их в любое удобное для вас время.
В ходе обучения вы будете выполнять домашние задания. Каждое из них посвящено одному из компонентов вашего выпускного проекта.
После выполнения всех домашних заданий вы получите готовый выпускной проект.
Оптимальная нагрузка
Возможность совмещать учебу с работой
Портфолио
Индивидуальная разработка итоговой проектной работы
Перспективы
Получите знания, которые помогут повысить вашу востребованность и доход
Партнеры
Многие студенты еще во время прохождения первой части программы находят или меняют работу, а к концу обучения могут претендовать на повышение в должности. Мы оказываем помощь в вопросах карьеры на протяжении всего обучения и спустя полгода после его завершения.
- Получите помощь с оформлением резюме, портфолио и сопроводительного письма
- Разместите свое резюме в базе OTUS и сможете получать приглашения на собеседования от партнеров
Формат обучения
Интерактивные вебинары
2 занятия по 2 ак.часа в неделю. Доступ к записям и материалам остается навсегда
Обратная связь
Домашние задания с поддержкой и обратной связью наших преподавателей помогут освоить изучаемые технологии
Активное комьюнити
Чат в Telegram для общения преподавателей и студентов
Программа
Введение в Greenplum
В этом модуле вы познакомитесь с Greenplum — мощной аналитической системой управления базами данных (СУБД), которая позволяет эффективно работать с большими объёмами информации. Вы узнаете, как использовать Greenplum для анализа и обработки данных, а также как настроить и развернуть эту систему.
Тема 1: Аналитические СУБД для работы с данными
Тема 2: Обзор архитектуры Greenplum
Тема 3: Развёртывание и базовая конфигурация: Single-node
Тема 4: Развёртывание и базовая конфигурация: Multi-node // ДЗ
Устройство БД и базовые концепты
В этом модуле вы познакомитесь с основными концепциями Greenplum, инструментами PXF и gpfdist, освоите SQL в Greenplum, научитесь оптимизировать запросы.
Тема 1: Основные концепции Greenplum
Тема 2: PXF и gpfdist
Тема 3: SQL в Greenplum // ДЗ
Тема 4: Оптимизация запросов
Тема 5: Индексы и их использование // ДЗ
Тема 6: Q&A сессия
Администрирование
В этом модуле вы познакомитесь с основными аспектами администрирования Greenplum, включая управление транзакциями и изоляцию, репликацию и отказоустойчивость, управление памятью, ресурсами и хранилищем данных. Вы также изучите вопросы безопасности и узнаете, как проводить мониторинг и диагностику системы.
Тема 1: Управление транзакциями и изоляция
Тема 2: Управление хранилищем данных // ДЗ
Тема 3: Управление памятью и ресурсами
Тема 4: Безопасность в Greenplum // ДЗ
Тема 5: Репликация и отказоустойчивость
Тема 6: Мониторинг и диагностика Greenplum // ДЗ
Тема 7: Q&A сессия
Хранилища данных
В этом модуле вы познакомитесь с базовыми и продвинутыми принципами построения хранилищ данных в Greenplum и узнаете, как моделировать данные, создавать аналитические функции и использовать машинное обучение для анализа информации.
Тема 1: Построение хранилищ данных: базовые принципы
Тема 2: Построение хранилищ данных: продвинутые принципы // ДЗ
Тема 3: Моделирование данных в Greenplum
Тема 4: Введение в аналитические функции // ДЗ
Тема 5: Машинное обучение в Greenplum
Проектная работа
Заключительный месяц курса посвящен проектной работе. Проект – это самая интересная часть обучения. Вы будете разрабатывать его на основе полученных на курсе навыков и компетенций. В процессе работы над проектом можно получить консультацию преподавателей.
Тема 1: Выбор темы и организация проектной работы
Тема 2: Консультация по проектам и домашним заданиям
Тема 3: Защита проектных работ. Подведение итогов курса
Также вы можете получить полную программу, чтобы убедиться, что обучение вам подходит
Выпускной проект
Каждый курс завершается финальным проектом, который предстоит защитить перед преподавателями и командой. Вам будет, что обсудить на собеседовании!
Вы можете выбрать одну из предложенных преподавателем тем или реализовать свою идею.
Преподаватели
Алексей Железной
FinTech
Senior Data Engineer
Senior Data Engineer, разрабатывает и проектирует пайплайны для обработки, хранения и визуализации данных более 5 лет Работает со многими популярными БД (включая ClickHouse, Greenplum, PostgreSQL), инструментами для обработки (Apache Airflow, Airbyte, dbt) и визуализации данных (Apache Superset, Redash, Datalens) Выпускник магистратуры ФКН НИУ ВШЭ
Преподает на курсах
- Data Engineer
- Data Warehouse Analyst
- Spark Developer
- Apache Kafka
- NoSQL
- ClickHouse для инженеров и архитекторов БД
- PostgreSQL для администраторов баз данных и разработчиков
- PostgreSQL. Advanced
- Greenplum для разработчиков и архитекторов баз данных
- System Design
- NoSQL для Иннотех
- Kafka для Альфа-Банк
- PostgreSQL для Альфа-Банк
Василий Трещев
Ранее работал в компаниях: Дататех, ГК Самолет, Национальная Факторинговая компания, Strabag. Последние 10 лет занимаюсь разработкой хранилищ данных и платформ для их обработки. Занимаюсь подготовкой специалистов для работы с Bigdata а именно: GreenPlum / PXF / Airflow / Python. Разработка учебных планов, подготовка методической документации, подготовка и проведение вебинаров, индивидуальная работа по вопросам, проведение консультаций. Занимаюсь развитием проекта "КУДА ИДТИ В IT" . Готовлю разные материалы, помогаю с подготовкой коллегам, провожу встречи, семинары, вебинары по направлению связанному с треком специалистов по данным (Дата инженер, разработчик хранилищ данных, Системный аналитик, BI аналитик / разработчик, DataOps); Занимаюсь развитием проекта "SQLClub" (обучение, обмен опытом, привлечение новых активистов. Отправной точкой в клубе является использование технологий и подходов, связанных с потребностями обеспечениями процессов по извлечению, обработке и хранению данных). Принимал участие в хакатонах DataHack, MoreTech в качестве эксперта. Поддерживаю проект популяризации использование Greenplum и его изучения https://t.me/sqlclub_ru/108 Занимаюсь задачами по разработки новых интеграционных решений и DataOps процессов в хранилищах данных. Образование: - Волгоградский государственный технический университет "Информационные системы и технологии" - Школа больших данных (ООО "Учебный центр "Коммерсант") - Arenadata DB для разработчиков (ADCSDB: Developer)
Преподает на курсах
- DWH на основе Arenadata
- Greenplum для разработчиков и архитекторов баз данных
Эксперты-практики делятся опытом, разбирают кейсы студентов и дают развернутый фидбэк на домашние задания
Ближайшие мероприятия
Открытый вебинар — это настоящее занятие в режиме он-лайн с преподавателем курса, которое позволяет посмотреть, как проходит процесс обучения. В ходе занятия слушатели имеют возможность задать вопросы и получить знания по реальным практическим кейсам.
1️⃣ Знакомство с Arenadata DB (Greenplum)
2️⃣ Особенности Архитектуры с Arenadata DB (Greenplum)
3️⃣ Для чего используется. Место Arenadata DB в EDWH
4️⃣ Отличия MPP ArenadataDB от PostgreSQL
5️⃣ Запуск Greenplum на своём хосте. Запуск и остановка кластера, подключение.
6️⃣ Загрузка данных из файловых источников – практический учебный пример.
7️⃣ Постоение аналитических запросов к данным – от теории к практике с реальным примером.
8️⃣ На что нужно обращать внимание при написании запроса на ArenadataDB
9️⃣ Преимущества ArendataDB и распространенность
🎯 Что вы получите в результате?
- Умение запускать Greenplum в собственной песочнице для старта работы.
- Понимание отличий Arenadata DB от других систем.
- Знания о базовых особенностях написания запросов.
- Умение писать запросы на основе учебного примера.
- Навыки загрузки данных по учебному примеру.
🚀 Не упустите шанс улучшить свои знания и навыки в области работы с данными! Записывайтесь на открытый урок уже сегодня!
Мы ждем вас на уроке!
1️⃣ Напишем мини-инструмент для генерации синтетических данных в PostgreSQL.
2️⃣ Создадим на стороне ArenadataDB (Greenplum) таблицы для хранения истории данных из внешнего источника PostgreSQL.
3️⃣ Изучим модель данных – поймем, как они связаны и взаимодействуют.
4️⃣ Напишем Pipeline (ETL) для систематической загрузки данных – автоматизируем процесс и повысим его эффективность!
🎯 Что вы получите в результате?
- Понимание, с чего начинается работа при построении хранилищ данных и из чего она состоит.
- Знание основных этапов работы дата-специалистов.
- Умение построить примитивный pipeline для загрузки данных.
- Навыки хранения истории изменения данных при помощи снимков данных.
🚀 Не упустите возможность развить свои навыки и узнать больше о работе с данными! Записывайтесь на открытый урок уже сегодня и станьте частью увлекательного мира аналитики данных!
Мы ждем вас на уроке!
Прошедшие
мероприятия
Корпоративное обучение для ваших сотрудников
- Курсы OTUS верифицированы крупными игроками ИТ-рынка и предлагают инструменты и практики, актуальные на данный момент
- Студенты работают в группах, могут получить консультации не только преподавателей, но и профессионального сообщества
- OTUS проверяет знания студентов перед стартом обучения и после его завершения
- Простой и удобный личный кабинет компании, в котором можно видеть статистику по обучению сотрудников
- Сертификат нашего выпускника за 5 лет стал гарантом качества знаний в обществе
- OTUS создал в IT более 120 курсов по 7 направлениям, линейка которых расширяется по 40-50 курсов в год
Отзывы
Подтверждение знаний и навыков
OTUS осуществляет лицензированную образовательную деятельность.
В конце прохождения специализации вы получите сертификат OTUS и официальный диплом о получении новой специальности
После обучения мы:
- Получите материалы по пройденным занятиям (видеозаписи курса и дoполнительные материалы)
- Создадите свой проект, который поможет при прохождении собеседований
- Повысите свою ценность и конкурентоспособность как IT-специалист
- Получите сертификат об окончании курса
Greenplum для разработчиков и архитекторов баз данных
Полная стоимость со скидкой
Стоимость указана для оплаты физическими лицами
вычета до 13% стоимости обучения. Оставьте заявку и менеджер вас проконсультирует
+7 499 938-92-02 бесплатно