MS SQL Server разработчик

Guru SQL: подробно об оптимизации, планах, транзакциях и о том, как писать эффективные запросы на данных большого объёма

Длительность

4 месяца

Продолжительность
4 месяца, 4 академических часа в неделю
Что даст вам этот курс

Во время курса будем подробно разбирать язык запросов и внутренние процессы СУБД, происходящие на всех этапах работы с запросом. Курс позволит понять детали процессов и получить чёткое представление, что делает тот или иной код, где могут возникнуть потенциальные проблемы, как их можно разрешить.

Подробно рассмотрим оптимизацию кода, как нужно писать, если у вас миллиарды данных, расскажем о популярных граблях, чтобы вы смогли их обойти.

Этот курс предназначен для:
— разработчиков с опытом работы с базами на уровне «делал и использовал, но как внутри работает не знаю» (например, через ORM);
— разработчиков с небольшим опытом работы с базами данных и желанием продвинуться дальше.

После обучения вы сможете:
— разрабатывать на SQL;
— проектировать БД и понимать все нюансы;
— анализировать и оптимизировать производительности запросов;
— писать сложные хранимые процедуры, функции и триггеры;
— читать план запроса.

Выпускной проект — создание и оптимизация собственной базы данных (для своей компании/стартапа). Преподаватель поможет с выбором темы и подскажет, как уменьшить scope работ, а у вас появится возможность получить обратную связь и отработать полученные знания на реальном материале.






О курсе и о себе

Вы останетесь в нашем комьюнити, мы всегда стараемся помочь студентам разобрать их текущие ситуации, дать важные и полезные советы, и у вас останется ваш опыт и знания





28 работодателей

Много практики и кейсов из реальных проектов

Вы, наверное, заметили, что программа отличается от обычной в университете. Вместо стандартных этапов "проектирование - обучение использованию - оптимизация" я предлагаю enterpise-схему, которая совпадает с порядком вещей на практике: устраиватесь на работу, вам показывают текущий проект, вы читаете код, который был написан до вас, и пишите свои небольшие кусочки. И только когда вы уже стали опытным разработчиком, вам дают задачу спроектировать какие-то таблицы, и позже всю базу данных. В своей программе я сделала те же этапы и в том же порядке, который встречается в реальных проектах.
Кристина Кучерова
Преподаватель курса
Вы, наверное, заметили, что программа отличается от обычной в университете. Вместо стандартных этапов "проектирование - обучение использованию - оптимизация" я предлагаю enterpise-схему, которая совпадает с порядком вещей на практике: устраиватесь на работу, вам показывают текущий проект, вы читаете код, который был написан до вас, и пишите свои небольшие кусочки. И только когда вы уже стали опытным разработчиком, вам дают задачу спроектировать какие-то таблицы, и позже всю базу данных. В своей программе я сделала те же этапы и в том же порядке, который встречается в реальных проектах.
Кристина Кучерова
Преподаватель курса
Преподаватели
Кристина Кучерова
Сбербанк России
Михаил Ржевский
Павел Стрекалов
Тимлид\архитектор БД в US-based startup Кремниевой долины.

Ex-Архитектор модели данных в Сбербанке России.

Окончила ЮРГПУ (НПИ) по специальности «Математическое обеспечение и администрирование информационных систем». С 2015 года — аспирант в Санкт-Петербургском политехническом университете им. Петра Великого.

Работала в компании Comepay в качестве DB-тимлида и заместителя тех. директора по архитектуре. Принимала участие в реализации проекта Syncplicity (Distillery, USA), где занималась разработкой БД и оптимизацией производительности.

Участник отраслевых конференций CMG Impact 2016 (San Diego, USA), Zabbix Conf 2017 (Рига, Латвия) и прочих.

Есть опыт преподавания курса «Базы Данных» в Ростовском колледже связи и информатики. Считает, что очень важно учиться именно на кейсах из реального производства.

IT-специалист, фрилансер, сертифицированный разработчик Dynamics AX и Dynamics CRM с более чем 5-летним опытом (экспертный уровень). Общий опыт работы в IT-индустрии — 15 лет.

Обладает широким спектром профессиональных навыков (MS SQL Server, MySQL, C# , HTML, XML, CSS, Javascript, JQuery, Unit Tests). Участвовал в реализации множества проектов, работал Senior Dynamics CRM. Является Microsoft Certified Trainer.

С 2009 года помимо основной работы занимается преподавательской деятельностью. Автор собственных курсов и специализированных статей на hosting-it.ru. Выпускник МИРЭА (окончил в 1994 году).

Ведущий специалист в АО "Гринатом".
Более 10 лет опыта профессиональной разработки.
Основной стек: .NET / C#, Java, MS SQL Server.

Full stack разработка систем для внутренних и внешних заказчиков (от анализа требований до реализации, эксплуатации и технической поддержки).

Закончил в 2006 году Московский институт электронной техники (МИЭТ) по специальности "Вычислительные машины комплексы системы и сети".

Кристина
Кучерова
Михаил
Ржевский
Павел
Стрекалов
Преподаватели
Кристина Кучерова
Сбербанк России
Тимлид\архитектор БД в US-based startup Кремниевой долины.

Ex-Архитектор модели данных в Сбербанке России.

Окончила ЮРГПУ (НПИ) по специальности «Математическое обеспечение и администрирование информационных систем». С 2015 года — аспирант в Санкт-Петербургском политехническом университете им. Петра Великого.

Работала в компании Comepay в качестве DB-тимлида и заместителя тех. директора по архитектуре. Принимала участие в реализации проекта Syncplicity (Distillery, USA), где занималась разработкой БД и оптимизацией производительности.

Участник отраслевых конференций CMG Impact 2016 (San Diego, USA), Zabbix Conf 2017 (Рига, Латвия) и прочих.

Есть опыт преподавания курса «Базы Данных» в Ростовском колледже связи и информатики. Считает, что очень важно учиться именно на кейсах из реального производства.

Михаил Ржевский
IT-специалист, фрилансер, сертифицированный разработчик Dynamics AX и Dynamics CRM с более чем 5-летним опытом (экспертный уровень). Общий опыт работы в IT-индустрии — 15 лет.

Обладает широким спектром профессиональных навыков (MS SQL Server, MySQL, C# , HTML, XML, CSS, Javascript, JQuery, Unit Tests). Участвовал в реализации множества проектов, работал Senior Dynamics CRM. Является Microsoft Certified Trainer.

С 2009 года помимо основной работы занимается преподавательской деятельностью. Автор собственных курсов и специализированных статей на hosting-it.ru. Выпускник МИРЭА (окончил в 1994 году).

Павел Стрекалов
Ведущий специалист в АО "Гринатом".
Более 10 лет опыта профессиональной разработки.
Основной стек: .NET / C#, Java, MS SQL Server.

Full stack разработка систем для внутренних и внешних заказчиков (от анализа требований до реализации, эксплуатации и технической поддержки).

Закончил в 2006 году Московский институт электронной техники (МИЭТ) по специальности "Вычислительные машины комплексы системы и сети".

Отзывы
3
Дмитрий
Попов
Великолепно! Большое спасибо Otus, особенно преподавателям курса MS SQL. Буду советовать всем своим друзьям, знакомым, чтобы повторили мой путь и укротили этого "монстра")
Читать целиком
Sergey
Здравствуйте.

Могу сказать, что я пришел на курс с минимальными знаниями о MS SQL и он оказался для меня немного сложным, но это именно то, что я искал. Последний модуль для меня уже был сложным, поэтому и хочу сказать, что курс сильный, дает широкие и глубокие знания.

Могу только рекомендовать этот курс, что и сделал для некоторых знакомых.

И отдельную благодарность хочу сказать преподавателям, которые делились своими уникальными знаниями и опытом. Это было очень интересно и познавательно.

Большое спасибо!
Читать целиком
Александр
Савчук
Кристина лучший лектор, читает замечательно, всё по делу, чувствуется, что есть опыт, есть желание делиться знаниями.
Остальным надо подтянуться в части подачи материала. Оценивать знания лекторов трудно, но не все хорошо готовятся к лекциям.
Не хватает, на мой взгляд, правильно подобранных домашних заданий.
Читать целиком
Дмитрий
Попов
Великолепно! Большое спасибо Otus, особенно преподавателям курса MS SQL. Буду советовать всем своим друзьям, знакомым, чтобы повторили мой путь и укротили этого "монстра")
Читать целиком
Sergey
Здравствуйте.

Могу сказать, что я пришел на курс с минимальными знаниями о MS SQL и он оказался для меня немного сложным, но это именно то, что я искал. Последний модуль для меня уже был сложным, поэтому и хочу сказать, что курс сильный, дает широкие и глубокие знания.

Могу только рекомендовать этот курс, что и сделал для некоторых знакомых.

И отдельную благодарность хочу сказать преподавателям, которые делились своими уникальными знаниями и опытом. Это было очень интересно и познавательно.

Большое спасибо!
Читать целиком
Александр
Савчук
Кристина лучший лектор, читает замечательно, всё по делу, чувствуется, что есть опыт, есть желание делиться знаниями.
Остальным надо подтянуться в части подачи материала. Оценивать знания лекторов трудно, но не все хорошо готовятся к лекциям.
Не хватает, на мой взгляд, правильно подобранных домашних заданий.
Читать целиком
Минимальные знания
Этот курс вам подойдёт, если вы:
— работали с БД и знаете, как они выглядят
— писали или читали простые запросы
— знаете типы данных и основные операторы на базовом уровне
— или являетесь выпускником курса «Реляционные СУБД»
Программа обучения
Модуль 1
Использование БД
Модуль 2
Проектирование БД
Модуль 3
Оптимизация и Администрирование БД
Использование БД
Учимся использовать SQL Server, изучаем нюансы диалекта SQL и планы запросов
Тема 1: Базы данных и какие они бывают
узнать про разные виды систем управления баз данных и самих БД
уметь выбрать где и какой вид лучше использовать
узнать про новые возможностях SQL server
развернуть бэкап учебной базы
Домашние задания: 1
1 Разворачиваем Backup и смотрим какой проект какую СУБД использует
1. Установите программы SQL Server 2016\2017
2. Разверните у себя бэкап базы WideWorldImporters (скриншот с восстановленной БД) WideWorldImporters-Full.bak
3. Поставьте SQL Sentry Plan Explorer
4. Сделайте проект для курса на github, пришлите ссылку на него (тут будем выкладывать скрипты по домашкам)
5. Придумайте и сделайте описание проекта, который будете делать в рамках всего курса.
В качестве проекта вы можете взять любую идею, которая вам близка. Это может быть какая-то часть вашего рабочего проекта, которую вы хотите переосмыслить.
Если есть идея, но не понятно как ее уложить в рамки учебного проекта, напишите преподавателю и мы поможем.
Проект мы будем делать весь курс и защищать его в самом конце, он будет заключаться в созданной БД со схемой, описанием проекта, и необходимыми процедурами\функциями или SQL кодом для демонстрации основного функционала системы.
Пока достаточно создать в github папку с проектом, создать там описание проекта - о чем он, какие функции будут реализованы, основные сущности, которые затем будут созданы (просто описание текстом).


Опционально
6. Найдите, какую СУБД использует любимый вами проект
Выберите проект, которым вы часто пользуетесь и найдите информацию с помощью какой базы данных он реализован.
Классификация: иерархическая, сетевая, реляционная, объектно-ориентированная, NoSql (если знаете колоночная, key-value, документарная, in-memory, графовая)
Структура ответа:
Название проекта: Проект
Используемые базы данных: БД (реляционная), БД (NoSQL документарная)
Количество серверов БД: 10
Ссылка на источник:
Тема 2: Оператор SELECT и простые фильтры
научиться делать выборки используя оператор SELECT
использовать простые фильтры в WHERE и объединение условий
попробовать разные виды JOIN
разобраться с тем как читать планы запросов
Домашние задания: 1
1 Запросы SELECT
Напишите выборки для того, чтобы получить:
1. Все товары, в которых в название есть пометка urgent или название начинается с Animal
2. Поставщиков, у которых не было сделано ни одного заказа (потом покажем как это делать через подзапрос, сейчас сделайте через JOIN)
3. Продажи с названием месяца, в котором была продажа, номером квартала, к которому относится продажа, включите также к какой трети года относится дата - каждая треть по 4 месяца, дата забора заказа должна быть задана, с ценой товара более 100$ либо количество единиц товара более 20. Добавьте вариант этого запроса с постраничной выборкой пропустив первую 1000 и отобразив следующие 100 записей. Соритровка должна быть по номеру квартала, трети года, дате продажи.
4. Заказы поставщикам, которые были исполнены за 2014й год с доставкой Road Freight или Post, добавьте название поставщика, имя контактного лица принимавшего заказ
5. 10 последних по дате продаж с именем клиента и именем сотрудника, который оформил заказ.
6. Все ид и имена клиентов и их контактные телефоны, которые покупали товар Chocolate frogs 250g
Тема 3: Подзапросы и WITH в SQL
писать запросы с использованием подзапросов
рассказать, что будет в результате выполнения запроса, без его запуска
Домашние задания: 1
1 Подзапросы и CTE
Для всех заданий где возможно, сделайте 2 варианта запросов:
1) через вложенный запрос
2) через WITH (для производных таблиц)

Напишите запросы:
1. Выберите сотрудников, которые являются продажниками, и еще не сделали ни одной продажи.
2. Выберите товары с минимальной ценой (подзапросом), 2 варианта подзапроса.
3. Выберите информацию по клиентам, которые перевели компании 5 максимальных платежей из [Sales].[CustomerTransactions] представьте 3 способа (в том числе с CTE)
4. Выберите города (ид и название), в которые были доставлены товары, входящие в тройку самых дорогих товаров, а также Имя сотрудника, который осуществлял упаковку заказов
5. Объясните, что делает и оптимизируйте запрос:
SELECT
Invoices.InvoiceID,
Invoices.InvoiceDate,
(SELECT People.FullName
FROM Application.People
WHERE People.PersonID = Invoices.SalespersonPersonID
) AS SalesPersonName,
SalesTotals.TotalSumm AS TotalSummByInvoice,
(SELECT SUM(OrderLines.PickedQuantity*OrderLines.UnitPrice)
FROM Sales.OrderLines
WHERE OrderLines.OrderId = (SELECT Orders.OrderId
FROM Sales.Orders
WHERE Orders.PickingCompletedWhen IS NOT NULL
AND Orders.OrderId = Invoices.OrderId)
) AS TotalSummForPickedItems
FROM Sales.Invoices
JOIN
(SELECT InvoiceId, SUM(Quantity*UnitPrice) AS TotalSumm
FROM Sales.InvoiceLines
GROUP BY InvoiceId
HAVING SUM(Quantity*UnitPrice) > 27000) AS SalesTotals
ON Invoices.InvoiceID = SalesTotals.InvoiceID
ORDER BY TotalSumm DESC

Приложите план запроса и его анализ, а также ход ваших рассуждений по поводу оптимизации.
Можно двигаться как в сторону улучшения читабельности запроса (что уже было в материале лекций), так и в сторону упрощения плана\ускорения.

Опциональная часть:
В материалах к вебинару есть файл HT_reviewBigCTE.sql - прочтите этот запрос и напишите что он должен вернуть и в чем его смысл, можно если есть идеи по улучшению тоже их включить.

Тема 4: Введение в планы запросов
читать и объяснять план запроса
оценивать разные запросы и сравнивать их стоимость
Тема 5: GROUP BY и HAVING. Временные таблицы и табличные переменные
писать запрос с использованием GROUP BY и HAVING,
писать запрос с Cube и Rollup
перечислить отличие HAVING и WHERE
создавать временные таблицы и табличные переменные,
объяснять разницу между этими объектами
19 августа, 20:00 — 21:30
Лектор: Михаил Ржевский
Домашние задания: 1
1 Группировки и агрегатные функции
1. Посчитать среднюю цену товара, общую сумму продажи по месяцам
2. Отобразить все месяцы, где общая сумма продаж превысила 10 000
3. Вывести сумму продаж, дату первой продажи и количество проданного по месяцам, по товарам, продажи которых менее 50 ед в месяц.
Группировка должна быть по году и месяцу.
3. Напишите запрос с временной таблицей и перепишите его с табличной переменной. Сравните планы.
В качестве запроса с временной таблицей и табличной переменной можно взять свой запрос.
Или запрос из ДЗ по Оконным функциям
Сделать расчет суммы продаж нарастающим итогом по месяцам с 2015 года (в рамках одного месяца он будет одинаковый, нарастать будет в течение времени выборки)
Выведите id продажи, название клиента, дату продажи, сумму продажи, сумму нарастающим итогом
Пример
Дата продажи Нарастающий итог по месяцу
2015-01-29 4801725.31
2015-01-30 4801725.31
2015-01-31 4801725.31
2015-02-01 9626342.98
2015-02-02 9626342.98
2015-02-03 9626342.98
Нарастающий итог должен быть без оконной функции.

4. Написать рекурсивный CTE sql запрос и заполнить им временную таблицу и табличную переменную
Дано :
CREATE TABLE dbo.MyEmployees
(
EmployeeID smallint NOT NULL,
FirstName nvarchar(30) NOT NULL,
LastName nvarchar(40) NOT NULL,
Title nvarchar(50) NOT NULL,
DeptID smallint NOT NULL,
ManagerID int NULL,
CONSTRAINT PK_EmployeeID PRIMARY KEY CLUSTERED (EmployeeID ASC)
);
INSERT INTO dbo.MyEmployees VALUES
(1, N'Ken', N'Sánchez', N'Chief Executive Officer',16,NULL)
,(273, N'Brian', N'Welcker', N'Vice President of Sales',3,1)
,(274, N'Stephen', N'Jiang', N'North American Sales Manager',3,273)
,(275, N'Michael', N'Blythe', N'Sales Representative',3,274)
,(276, N'Linda', N'Mitchell', N'Sales Representative',3,274)
,(285, N'Syed', N'Abbas', N'Pacific Sales Manager',3,273)
,(286, N'Lynn', N'Tsoflias', N'Sales Representative',3,285)
,(16, N'David',N'Bradley', N'Marketing Manager', 4, 273)
,(23, N'Mary', N'Gibson', N'Marketing Specialist', 4, 16);

Результат вывода рекурсивного CTE:
EmployeeID Name Title EmployeeLevel
1 Ken Sánchez Chief Executive Officer 1
273 | Brian Welcker Vice President of Sales 2
16 | | David Bradley Marketing Manager 3
23 | | | Mary Gibson Marketing Specialist 4
274 | | Stephen Jiang North American Sales Manager 3
276 | | | Linda Mitchell Sales Representative 4
275 | | | Michael Blythe Sales Representative 4
285 | | Syed Abbas Pacific Sales Manager 3
286 | | | Lynn Tsoflias Sales Representative 4


Опционально:
Написать все эти же запросы, но, если за какой-то месяц не было продаж, то этот месяц тоже должен быть в результате и там должны быть нули.
Тема 6: SQL операторы изменения данных
уметь определить к чему относится оператор к DDL или DML
использовать операторы INSERT, UPDATE, UPSERT, DELETE, MERGE, Bulk insert
использовать утилиту bcp
22 августа, 20:00 — 21:30
Домашние задания: 1
1 Insert, Update, Merge
1. Довставлять в базу 5 записей используя insert в таблицу Customers или Suppliers
2. удалите 1 запись из Customers, которая была вами добавлена
3. изменить одну запись, из добавленных через UPDATE
4. Написать MERGE, который вставит вставит запись в клиенты, если ее там нет, и изменит если она уже есть
5. Напишите запрос, который выгрузит данные через bcp out и загрузить через bulk insert
Тема 7: Оконные функции в SQL
писать запросы с использованием оконных функций
проходить тест по оконным функциям
26 августа, 20:00 — 21:30
Домашние задания: 1
1 Оконные функции
1.Сделать расчет суммы продаж нарастающим итогом по месяцам с 2015 года (в рамках одного месяца он будет одинаковый, нарастать будет в течение времени выборки)
Выведите id продажи, название клиента, дату продажи, сумму продажи, сумму нарастающим итогом
Пример
Дата продажи Нарастающий итог по месяцу
2015-01-29 4801725.31
2015-01-30 4801725.31
2015-01-31 4801725.31
2015-02-01 9626342.98
2015-02-02 9626342.98
2015-02-03 9626342.98
Продажи можно взять из таблицы Invoices.
Сделать 2 варианта запроса - через windows function и без них. Написать какой быстрее выполняется, сравнить по set statistics time on;
2. Вывести список 2х самых популярных продуктов (по кол-ву проданных) в каждом месяце за 2016й год (по 2 самых популярных продукта в каждом месяце)
3. Функции одним запросом
Посчитайте по таблице товаров, в вывод также должен попасть ид товара, название, брэнд и цена
пронумеруйте записи по названию товара, так чтобы при изменении буквы алфавита нумерация начиналась заново
посчитайте общее количество товаров и выведете полем в этом же запросе
посчитайте общее количество товаров в зависимости от первой буквы названия товара
отобразите следующий id товара исходя из того, что порядок отображения товаров по имени
предыдущий ид товара с тем же порядком отображения (по имени)
названия товара 2 строки назад, в случае если предыдущей строки нет нужно вывести "No items"
сформируйте 30 групп товаров по полю вес товара на 1 шт
Для этой задачи НЕ нужно писать аналог без аналитических функций
4. По каждому сотруднику выведите последнего клиента, которому сотрудник что-то продал
В результатах должны быть ид и фамилия сотрудника, ид и название клиента, дата продажи, сумму сделки
5. Выберите по каждому клиенту 2 самых дорогих товара, которые он покупал
В результатах должно быть ид клиета, его название, ид товара, цена, дата покупки

Опционально можно сделать вариант запросов для заданий 2,4,5 без использования windows function и сравнить скорость как в задании 1.

Bonus из предыдущей темы
Напишите запрос, который выбирает 10 клиентов, которые сделали больше 30 заказов и последний заказ был не позднее апреля 2016.
Тема 8: Операторы CROSS APPLY, PIVOT, CUBE
писать запросы с использованием CROSS APPLY, PIVOT и UNPIVOT, описывать значение операторов
29 августа, 20:00 — 21:30
Домашние задания: 1
1 Pivot и Cross Apply
1. Требуется написать запрос, который в результате своего выполнения формирует таблицу следующего вида:
Название клиента
МесяцГод Количество покупок

Клиентов взять с ID 2-6, это все подразделение Tailspin Toys
имя клиента нужно поменять так чтобы осталось только уточнение
например исходное Tailspin Toys (Gasport, NY) - вы выводите в имени только Gasport,NY
дата должна иметь формат dd.mm.yyyy например 25.12.2019

Например, как должны выглядеть результаты:
InvoiceMonth Peeples Valley, AZ Medicine Lodge, KS Gasport, NY Sylvanite, MT Jessie, ND
01.01.2013 3 1 4 2 2
01.02.2013 7 3 4 2 1

2. Для всех клиентов с именем, в котором есть Tailspin Toys
вывести все адреса, которые есть в таблице, в одной колонке

Пример результатов
CustomerName AddressLine
Tailspin Toys (Head Office) Shop 38
Tailspin Toys (Head Office) 1877 Mittal Road
Tailspin Toys (Head Office) PO Box 8975
Tailspin Toys (Head Office) Ribeiroville
.....

3. В таблице стран есть поля с кодом страны цифровым и буквенным
сделайте выборку ИД страны, название, код - чтобы в поле был либо цифровой либо буквенный код
Пример выдачи

CountryId CountryName Code
1 Afghanistan AFG
1 Afghanistan 4
3 Albania ALB
3 Albania 8

4. Перепишите ДЗ из оконных функций через CROSS APPLY
Выберите по каждому клиенту 2 самых дорогих товара, которые он покупал
В результатах должно быть ид клиета, его название, ид товара, цена, дата покупки

5. Code review (опционально). Запрос приложен в материалы Hometask_code_review.sql.
Что делает запрос?
Чем можно заменить CROSS APPLY - можно ли использовать другую стратегию выборки\запроса?
Тема 9: Итоговое занятие по SELECT
перечислять этапы выполнения запроса
читать длинные запросы и рассказывать что должно получится после выполнения, без выполнения запроса
2 сентября, 20:00 — 21:30
Тема 10: Операторы DDL
создавать объекты БД с помощью своих SQL запросов
5 сентября, 20:00 — 21:30
Лектор: Михаил Ржевский
Домашние задания: 1
1 Используем DDL
Начало проектной работы.
Создание таблиц и представлений для своего проекта.
Нужно используя операторы DDL создать:
1. 3-4 основные таблицы для своего проекта.
2. Первичные и внешние ключи для всех созданных таблиц
3. 1-2 индекса на таблицы


В качестве проекта вы можете взять любую идею, которая вам близка и сделать схему базы данных, а затем создать ее.
Это может быть какая-то часть вашего рабочего проекта, которую вы хотите переосмыслить.
Если есть идея, но не понятно как ее уложить в рамки учебного проекта, напишите преподавателю и мы поможем.
Тема 11: Выборки из xml и json полей
писать выборки из xml полей
писать выборки из json полей
9 сентября, 20:00 — 21:30
Лектор: Павел Стрекалов
Тема 12: Динамический SQL
создавать процедуры с использованием динамического SQL,
перечислять ошибки при использовании динамического SQL которые ведут к угрозам безопасности
объяснить как можно сохранять план запроса по динамическому SQL
12 сентября, 20:00 — 21:30
Домашние задания: 1
1 Пишем динамические запросы
1. Загрузить данные из файла StockItems.xml в таблицу StockItems.
Существующие записи в таблице обновить, отсутствующие добавить (искать по StockItemName).
Файл StockItems.xml в личном кабинете.

2. Выгрузить данные из таблицы StockItems в такой же xml-файл, как StockItems.xml

3. В таблице StockItems в колонке CustomFields есть данные в json.
Написать select для вывода:
- StockItemID
- StockItemName
- CountryOfManufacture (из CustomFields)
- Range (из CustomFields)

4. Найти в StockItems строки, где есть тэг "Vintage"
Запрос написать через функции работы с JSON.
Тэги искать в поле CustomFields, а не в Tags.

5. Пишем динамический PIVOT.
По заданию из 8го занятия про CROSS APPLY и PIVOT
Требуется написать запрос, который в результате своего выполнения формирует таблицу следующего вида:
Название клиента
МесяцГод Количество покупок

Нужно написать запрос, который будет генерировать результаты для всех клиентов
имя клиента указывать полностью из CustomerName
дата должна иметь формат dd.mm.yyyy например 25.12.2019
Тема 13: Уровни изоляции транзакций
объяснять разницу в уровнях изоляции транзакций,
проходить тест по тому какой уровень когда нужно применять
объяснять какие блокировки каждый уровень накладывает
создавать процедуры с обработкой ошибок на SQL
16 сентября, 20:00 — 21:30
Тема 14: Хранимые процедуры и функции
создавать хранимые процедуры и функции
объяснять различия
объяснять хранение плана запроса по процедурам, функциям и запросам
объяснять что такое триггер и как его создавать, в каких случаях они нужны
19 сентября, 20:00 — 21:30
Лектор: Павел Стрекалов
Домашние задания: 1
1 SP и function
1) Написать функцию возвращающую Клиента с набольшей
суммой покупки.
2) Написать хранимую процедуру с входящим параметром
СustomerID, выводящую сумму покупки по этому клиенту.
Использовать таблицы :
Sales.Customers
Sales.Invoices
Sales.InvoiceLines
3) Cозда5ть одинаковую функцию и хранимую процедуру, посмотреть в чем разница в производительности и почему
4) Создайте табличную функцию покажите как ее можно вызвать для каждой строки result set'а без использования цикла.
Во всех процедурах, в описании укажите для преподавателям
5) какой уровень изоляции нужен и почему.

Опционально
6) Переписываем одну и ту же процедуру kitchen sink с множеством входных параметров по поиску в заказах на динамический SQL.
Сравниваем планы запроса.
7) напишите запрос в транзакции где есть выборка, вставка\добавление\удаление данных и параллельно запускаем выборку данных в разных уровнях изоляции, нужно предоставить мини отчет, что на каком уровне было видно со скриншотами и ваши выводы (1-2 предложение)
8) сделайте паралелльно в 2х окнах добавление данных в одну таблицу с разным уровнем изоляции, изменение данных в одной таблице, изменение одной и той же строки. Что в итоге получилось, что нового узнали.
Тема 15: Создание и использование CLR
cоздавать процедуры с использованием CLR
23 сентября, 20:00 — 21:30
Лектор: Павел Стрекалов
Домашние задания: 1
1 Создаем CLR
Добавляем в SQL server через CLR функцию, которой лично вам не хватает.
Самый распространенный вариант - регулярные выражения.
Делимся впечатлением и опытом с коллегами
Проектирование БД
Лучшие и худшие практики проектирования БД, начинаем делать свою проектную работу.
Тема 1: Проектирование БД
проектировать БД
нормализовывать таблицы
26 сентября, 20:00 — 21:30
Домашние задания: 1
1 Начало проекта
Смотрим на схему, которая получилась в создании таблиц через DDL
Строим схему в use-case средстве, генерируем SQL код для создания.
Приводим свою БД в 3ю нормальную форму, либо если таблица в 1нф или 2нф или вообще не нормализована пишем зачем и почему так лучше.

В качестве проекта вы можете взять любую идею, которая вам близка и сделать схему базы данных, а затем создать ее.
Это может быть какая-то часть вашего рабочего проекта, которую вы хотите переосмыслить.
Если есть идея, но не понятно как ее уложить в рамки учебного проекта, напишите преподавателю и мы поможем.
На занятии-семинаре по представлению проектов в конце 2го модуля нужно будет показать схему БД, объяснить бизнес идею, а также технические решения, которые вы считаете важными.
Тема 2: Подходы к проектированию БД
проектировать БД исходя из требований
учитывать аспекты безопасности при проектировании БД
30 сентября, 20:00 — 21:30
Тема 3: Индексы
создавать индексы
определять какие индексы не нужны
3 октября, 20:00 — 21:30
Домашние задания: 1
1 Какие индексы вам нужны
Думаем какие запросы у вас будут в базе и добавляем для них индексы. Проверяем, что они используются в запросе.
Тема 4: Проектируем БД для OLTP нагрузки. Почему важно разделить OLTP и OLAP.
различать OLTP и OLAP
проектировать БД для OLTP нагрузки
14 октября, 20:00 — 21:30
Тема 5: Проектирование хранилищ данных и OLAP систем
проектировать хранилища данных
17 октября, 20:00 — 21:30
Домашние задания: 1
1 Домашнее задание
Создать куб в рамках своего проекта/решения
Тема 6: Семинар по созданным проектам БД
обсудить и получить обратную связь по проекту
21 октября, 20:00 — 21:30
Оптимизация и Администрирование БД
Продолжаем изучать оптимизацию запросов и базы в SQL Server. Подходы и практики администрирования БД.
Тема 1: Планы запросов, а теперь подробнее.
анализировать план запроса и делать выводы как проводить оптимизацию
интерпретировать статистики по времени и вводу выводу
определять parameter sniffing и устранять его
24 октября, 20:00 — 21:30
Тема 2: DMV в SQL Server
различать разные DMV
использовать DMV для работы
28 октября, 20:00 — 21:30
Тема 3: Оптимизация работы базы данных
находить проблемные места в работе сервера БД
находить и устранять запросы, которые нагружают сервер БД
интерпретировать информацию из Activity Monitor и делать выводы о характере нагрузки
использовать профайлер для нахождения ресурсоемких запросов
использовать механизм extended events
31 октября, 20:00 — 21:30
Тема 4: Популярные Hint'ы и подсказки оптимизатору
перечислить в каких случаях какие хинты нужно и можно применять
понимать минусы и плюсы использования хинтов и принимать решения о целесообразности их использования
7 ноября, 20:00 — 21:30
Домашние задания: 1
1 Оптимизируем запрос
Цель: Используем все свои полученные знания для оптимизации сложного запроса. Вариант 1. Вы можете взять запрос со своей работы с планом и показать, что было до оптимизации, какие решения вы применили, и что стало после. В этом случае нужно приложить Текст запроса, актуальный план и статистики по времени и операциям ввода\вывода до оптимизации и после оптимизации. Опишите кратко ход рассуждений при оптимизации. Вариант 2. Оптимизируйте запрос по БД WorldWideImporters. Приложите текст запроса со статистиками по времени и операциям ввода вывода, опишите кратко ход рассуждений при оптимизации. Select ord.CustomerID, det.StockItemID, SUM(det.UnitPrice), SUM(det.Quantity), COUNT(ord.OrderID) FROM Sales.Orders AS ord JOIN Sales.OrderLines AS det ON det.OrderID = ord.OrderID JOIN Sales.Invoices AS Inv ON Inv.OrderID = ord.OrderID JOIN Sales.CustomerTransactions AS Trans ON Trans.InvoiceID = Inv.InvoiceID JOIN Warehouse.StockItemTransactions AS ItemTrans ON ItemTrans.StockItemID = det.StockItemID WHERE Inv.BillToCustomerID != ord.CustomerID AND (Select SupplierId FROM Warehouse.StockItems AS It Where It.StockItemID = det.StockItemID) = 12 AND (SELECT SUM(Total.UnitPrice*Total.Quantity) FROM Sales.OrderLines AS Total Join Sales.Orders AS ordTotal On ordTotal.OrderID = Total.OrderID WHERE ordTotal.CustomerID = Inv.CustomerID) > 250000 AND DATEDIFF(dd, Inv.InvoiceDate, ord.OrderDate) = 0 GROUP BY ord.CustomerID, det.StockItemID ORDER BY ord.CustomerID, det.StockItemID
Тема 5: Семинар: Оптимизация сложных запросов
оптимизировать запрос
анализировать план запроса
анализировать и принимать решения по оптимизации статистики ввода вывода по запросу
11 ноября, 20:00 — 21:30
Тема 6: Еще раз об индексах
обновлять статистику
создавать недостающие индексы
находить и удалять неиспользующиеся индексы
обслуживать индексы
14 ноября, 20:00 — 21:30
Тема 7: Резервное копирование и восстановление
создавать backup базы данных
делать восстановление из бэкапа
18 ноября, 20:00 — 21:30
Тема 8: Репликация данных, Job'ы и SQL Agent
настраивать репликацию
выбирать нужный вид репликации
21 ноября, 20:00 — 21:30
Тема 9: Очереди в MS SQL Server
создавать очереди в SQL Server
25 ноября, 20:00 — 21:30
Домашние задания: 1
1 Создание очереди
Создание очереди в БД для фоновой обработки задачи в БД.
Тема 10: Секционирование таблиц
определять когда нужно секционировать таблицы
секционировать таблицы
28 ноября, 20:00 — 21:30
Домашние задания: 1
1 Секционирование таблицы
Выбираем в своем проекте таблицу-кандидат для секционирования и добавляем партиционирование.
Если в проекте нет такой таблицы, то делаем анализ базы данных из первого модуля, выбираем таблицу и делаем ее секционирование, с переносом данных по секциям (партициям) - исходя из того, что таблица большая, пишем скрипты миграции в секционированную таблицу
Тема 11: Безопасность в SQL Server
Немного про пользователей и политики безопасности в SQL Server.
2 декабря, 20:00 — 21:30
Тема 12: Обсуждение проектов. Подводим итоги курса.
презентовать свой проект
получить обратную связь
принять поздравления об окончании курса
5 декабря, 20:00 — 21:30
Домашние задания: 1
1 Защита проектов
На демонстрации нужно будет рассказать про ваш проект:
1) описание бизнес идеи, какие проблемы решаются
2) требования к проекту по производительности, функциональности, безопасности
3) показать схему базы данных
4) созданную базу данных с данными - хотя бы пару строк в основных таблицах
5) продемонстрировать работу БД по основному бизнес потому, например, если вы сделали интернет магазин, то нужно показать как пользователь будет делать заказ - запустить процедуры или SQL, который сформирует корзину, добавит товары на доставку и т.д.
6) рассказать какие решения были приняты вам, что соответствовать требованиям к проекту, например, на какую нагрузку вы рассчитываете и какие решения приняли, чтобы ее выдержать.
7) принять поздравления о завершении программы и защите проекта.

Выпускной проект
Выпускной проект — создание и оптимизация собственной базы данных (для своей компании/стартапа). Преподаватель поможет с выбором темы и подскажет, как уменьшить scope работ, а у вас появится возможность получить обратную связь и отработать полученные знания на реальном материале.
Прошедшие открытые вебинары по курсу
Открытый вебинар — это настоящее занятие в режиме он-лайн с преподавателем курса, которое позволяет посмотреть, как проходит процесс обучения. В ходе занятия слушатели имеют возможность задать вопросы и получить знания по реальным практическим кейсам.
Индексы в SQL Server
Кристина Кучерова
Порядок выполнения запроса SELECT и план запроса в MS SQL Server
Кристина Кучерова
После обучения вы
Сможете наконец сделать так, чтобы в базе всё считалось и не падало:
— перепишете свои запросы так, чтобы они работали в 5 раз быстрее
— удалите ненужные индексы и добавите нужные
— научитесь применять изменения к базе без простоя
Ваш сертификат

онлайн-образование

Сертификат №0001

Константин Константинопольский

Успешно закончил курс «MS SQL Server разработчик»
Выполнено практических заданий: 16 из 16

Общество с ограниченной ответственностью “Отус Онлайн-Образование”

Город:
Москва

Генеральный директор ООО “Отус Онлайн-Образование”
Виталий Чибриков

Лицензия на осуществление образовательной деятельности
№ 039825 от 28 декабря 2018г.

онлайн-образование

Сертификат №0001

Константин Константинопольский

Успешно закончил курс «MS SQL Server разработчик»
Выполнено практических заданий: 16 из 16

Общество с ограниченной ответственностью “Отус Онлайн-Образование”

Город:
Москва

Генеральный директор ООО “Отус Онлайн-Образование”
Виталий Чибриков

Лицензия на осуществление образовательной деятельности
№ 039825 от 28 декабря 2018г.