[Специалист] М10777: Внедрение хранилищ данных в Microsoft SQL Server 2012

Складчина: [Специалист] М10777: Внедрение хранилищ данных в Microsoft SQL Server 2012

Учебный Центр «Специалист» при МГТУ им. Н.Э.Баумана

Курс М10777 Внедрение хранилищ данных в Microsoft SQL Server 2012
10777: Implementing a Data Warehouse with Microsoft SQL Server 2012​

В ходе занятий по этому 5-дневному курсу Вы овладеете реализацией BI-платформы для поддержки аналитики для информационных работников. Вы узнаете, как создать хранилище данных в SQL Server 2012, внедрить решение ETL со службами SQL Server Integration Services, проверить и очистить данные с помощью SQL Server Data Quality Services и SQL Server Master Data Services. Успешное окончание курса поможет Вам подготовиться к экзамену Microsoft 70-463.

Microsoft SQL Server 2012 - система управления реляционными базами данных. Программный продукт предлагает разработчикам и пользователям широкий набор возможностей по созданию решений с высоким уровнем производительности, надежности и безопасности, является комплексной платформой управления данными и бизнес-анализа.

BI-технологии позволяют анализировать большие объёмы информации, заостряя внимание пользователей лишь на ключевых факторах эффективности, моделируя исход различных вариантов действий, отслеживая результаты принятия тех или иных решений. SQL Server 2008 R2 содержит ряд новых возможностей BI, дает всем пользователям доступ к развитым средствам бизнес-анализа.

Основной аудиторией данного курса являются лица, в обязанности которых входит администрирование SQL-сервера, а также аналитики, разработчики, специалисты по системам отчётности, программисты 1С и т.п. Их обязанности фокусируются на практической работе по созданию BI-решений, включая внедрение хранилищ данных, ETL, и очистке данных. Основные обязанности:

• Реализация хранилища данных
• Разработка пакетов SSIS для извлечения данных и загрузки / передачи / преобразования
• Обеспечение целостности данных, с использованием Master Data Services
• Очистка данных с помощью служб Data Quality

По окончании курса Вы будете уметь:

• Представлять концепцию и архитектуру хранилища данных.
• Выбирать подходящую аппаратную платформу для хранилищ данных.
• Планировать и создавать хранилища данных.
• Реализовывать потоки данных в SSIS пакетах.
• Производить отладку и устранение неполадок SSIS пакетов.
• Реализовывать SSIS решение, которое поддерживает инкрементную загрузку хранилища и изменение данных.
• Осуществлять интеграцию данных из облака в хранилище данных.
• Реализовывать очистку данных с помощью службы Microsoft Data Quality.
• Реализовывать Master Data Services для обеспечения целостности данных.
• Расширять пакеты SSIS пользовательскими скриптами и компонентами.
• Развертывать и настраивать пакеты SSIS.
• Представлять, как информационные работники могут использовать данные из хранилища данных.

Спойлер: Программа курса

Модуль 1. Введение в хранилища данных

• Описание концепции и архитектуры хранилища данных
• Решение для хранилища данных
• Лабораторная работа: Изучение решения для хранилища данных
  • Изучение источников данных
  • Изучение процессов ETL
  • Изучение хранилищ данных

Модуль 2. Аппаратное обеспечение для хранилища данных

• Сложности построения хранилищ данных
• Архитектура хранилищ данных
• Оборудование для хранилищ данных

Модуль 3. Проектирование и реализация хранилищ данных

• Логический дизайн хранилищ данных
• Физический дизайн хранилищ данных
• Лабораторная работа: Реализация схемы хранилища данных
  • Реализация схемы Звезда
  • Реализация схемы Снежинка
  • Реализация таблицы времени

Модуль 4. Разработка и внедрение схемы для хранилища данных

• Введение в ETL с SSIS
• Изучение источников данных
• Реализация потока данных
• Лабораторная работа: Реализация потока данных в пакете служб SSIS
  • Изучение источников данных
  • Передача данных с помощью задачи потока данных
  • Использование преобразования в потоке данных

Модуль 5. Реализация потока управления в пакете SSIS

• Введение в поток управления
• Создание динамических пакетов
• Использование контейнеров
• Управление согласованностью
• Лабораторная работа: Реализация потока управления в пакете SSIS
  • Использование задач и очередность в потоке управления
  • Использование переменных и параметров
  • Использование контейнеров
• Лабораторная работа: Использование транзакций и контрольных точек
  • Использование транзакций
  • Использование контрольных точек

Модуль 6. Отладка и устранение неполадок служб SSIS

• Отладка пакетов служб SSIS
• Ведение журнала событий пакетов служб SSIS
• Обработка ошибок в пакете служб SSIS
• Лабораторная работа: Отладка и устранение неполадок пакетов служб SSIS
  • Отладка пакетов служб SSIS
  • Ведение журнала выполнения пакетов служб SSIS
  • Реализация обработчиков событий
  • Обработка ошибок в потоке данных

Модуль 7. Реализация инкрементных ETL процессов

• Введение в инкрементные процессы ETL
• Извлечение изменения данных
• Загрузка измененных данных
• Лабораторная работа: извлечение измененных данных
  • Использование столбца типа DateTime для поэтапного извлечения данных
  • Использование отслеживания изменений
• Лабораторная работа: загрузка инкрементных изменений
  • Использование задачи Lookup task, чтобы вставить данные измерений
  • Использование задачи Lookup task, чтобы вставить или обновить данные измерений
  • Реализация медленно изменяющихся измерений
  • Использование инструкции MERGE для загрузки фактических данных

Модуль 8. Включение данных из облака в хранилище данных

• Обзор «облачных» источников данных
• SQL Server Azure
• Рынок данных Azure
• Лабораторная работа: Включение данных из облака в хранилище данных
  • Извлечение данных из SQL Azure
  • Получение данных из рынка данных Azure

Модуль 9. Обеспечение качества данных

• Введение в очистку данных
• Использование Data Quality Services для очистки данных
• Использование Data Quality Services для соответствия данных
• Лабораторная работа: Очистка данных
  • Создание базы знаний DQS
  • Очистка данных с помощью проекта DQS
  • Использование DQS в SSIS пакете
• Лабораторная работа: удаление повторяющихся данных
  • Создание политики соответствия
  • Использование Data Quality Services для соответствия данных

Модуль 10. Использование Master Data Services

• Основные понятия Master Data Services
• Реализация модели Master Data Services
• Использование надстройки Excel с Master Data Services
• Лабораторная работа: Реализация Master Data Services
  • Создание базовой модели MDS
  • Редактирование моделей MDS с помощью Excel
  • Загрузка данных в MDS
  • Обеспечение бизнес-правил
  • Получение Master Data Services данных

Модуль 11. Расширение SSIS

• Использование пользовательских компонентов в SSIS
• Использование сценариев в SSIS
• Лабораторная работа: использование скриптов и пользовательских компонентов
  • Использование пользовательских компонентов
  • Использование Задачи сценарий (Script Task)

Модуль 12. Развертывание и настройка пакетов служб SSIS

• Обзор развертывания
• Развертывание проектов служб SSIS
• Планирование выполнения пакетов служб SSIS
• Лабораторная работа: Развертывание и настройка пакетов служб SSIS
  • Создание каталога SSIS
  • Развертывание SSIS проекта
  • Создание среды для SSIS решений
  • Запускпакетовслужб SSIS в SQL Server Management Studio
  • Запуск пакетов SSIS по расписанию агентом SQL Server

Модуль 13. Использование данных в хранилище

• Использование Excel для анализа данных в хранилище
• Введение в PowerPivot
• Введение в Crescent
• Лабораторная работа: использование хранилищ данных
  • Использование PowerPivot для создания запроса к хранилищу данных
  • Визуализация данных с помощью Crescent

Продолжительность: 40 ак. ч.
Стоимость: 25 990 руб.