Обработка данных в облачных сервисах Microsoft

В пятидневном курсе под руководством инструктора предлагается изучить, как обрабатывать большие данные с помощью инструментов и сервисов Azure, включая Azure Stream Analytics, Azure Data Lake, хранилище данных SQL Azure и Azure Data Factory. В процессе обучения так же объясняется, как включить пользовательские функции и интегрировать Python и R.

  Для кого:

Основная аудитория этого курса ­— инженеры данных (ИТ-специалисты, разработчики и информационные работники), которые планируют внедрить рабочие процессы для обработки больших данных в Azure.

Что должен знать слушатель

Требования для прохождения курса:
  • Понимание служб данных Azure;
  • Базовые знания об операционной системе Microsoft Windows и ее основных функциях;
  • Знание реляционных баз данных.

  • Результаты обучения

    После прохождения этого курса студенты смогут:
  • Описывать общие архитектуры для обработки больших данных с помощью инструментов и служб Azure;
  • Описывать, как использовать Azure Stream Analytics для проектирования и реализации потоковой обработки больших данных;
  • Описывать порядок включения пользовательских функций и действий по машинному обучению в задание Azure Stream Analytics;
  • Описывать, как использовать Azure Data Lake Analytics в качестве крупномасштабного хранилища файлов данных;
  • Описывать, как использовать Azure Data Lake Analytics для проверки и обработки данных, хранящихся в хранилище Azure Data Lake Store;
  • Описывать, как создавать и развертывать пользовательские функции и операции, интегрировать с Python и R, а также защищать и оптимизировать задания;
  • Описывать, как использовать хранилище данных SQL Azure для создания хранилища, которое может поддерживать крупномасштабную аналитическую обработку данных в состоянии покоя;
  • Описывать, как использовать хранилище данных SQL Azure для выполнения аналитической обработки, как поддерживать производительность и как защитить данные;
  • Описывать, как использовать фабрику данных Azure для импорта, преобразования и передачи данных между хранилищами и службами.

  • Программа обучения

    Модуль 1 Архитектуры для проектирования больших данных с Azure▼

    • 1.1 Понимание больших данных
    • 1.2 Архитектура для обработки больших данных
    • 1.3 Соображения по проектированию решений для больших данных
    • Лаб. раб. Проектирование архитектуры больших данных

    Модуль 2 Обработка потоков событий с помощью Azure Stream Analytics▼

    • 2.1 Введение в Azure Stream Analytics
    • 2.2 Настройка заданий Azure Stream Analytics
    • Лаб. раб. Обработка потоков событий с помощью Azure Stream Analytics

    Модуль 3 Выполнение пользовательской обработки в Azure Stream Analytics▼

    • 3.1 Реализация пользовательских функций
    • 3.2 Включение машинного обучения в задание Azure Stream Analytics
    • Лаб. раб. Выполнение пользовательской обработки с помощью Azure Stream Analytics

    Модуль 4 Управление большими данными в Azure Data Lake Store▼

    • 4.1 Использование хранилища озера данных Azure
    • 4.2 Мониторинг и защита данных в хранилище озера данных Azure
    • Лаб. раб. Управление большими данными в хранилище озера данных Azure

    Модуль 5 Обработка больших данных с помощью Azure Data Lake Analytics▼

    • 5.1 Введение в Azure Data Lake Analytics
    • 5.2 Анализ данных с помощью U-SQL
    • 5.3 Сортировка, группировка и объединение данных
    • Лаб. раб. Обработка больших данных с помощью Azure Data Lake Analytics

    Модуль 6 Реализация пользовательских операций и мониторинг производительности в Azure Data Lake Analytics▼

    • 6.1 Включение пользовательских функций в задания Google Analytics
    • 6.2 Управление и оптимизация рабочих мест
    • Лаб. раб. Реализация пользовательских операций и мониторинг производительности в Azure Data Lake Analytics

    Модуль 7 Реализация хранилища данных SQL Azure▼

    • 7.1 Введение в хранилище данных SQL Azure
    • 7.2 Разработка таблиц для эффективных запросов
    • 7.3 Импорт данных в хранилище данных SQL Azure
    • Лаб.раб. Реализация хранилища данных SQL Azure

    Модуль 8 Выполнение аналитики с хранилищем данных SQL Azure▼

    • 8.1 Запрос данных в хранилище данных SQL Azure
    • 8.2 Поддержание производительности
    • 8.3 Защита данных в хранилище данных SQL Azure
    • Лаб. раб. Выполнение аналитики с хранилищем данных SQL Azure

    Модуль 9 Автоматизация потока данных с помощью Azure Data Factory▼

    • 9.1 Введение в Azure Factory Data
    • 9.2 Передача данных
    • 9.3 Преобразование данных
    • 9.4 Мониторинг производительности и защита данных
    • Лаб.раб. Автоматизация потока данных с Azure Factory Data