AF.ADH-A-Serv

Эксплуатация Arenadata Hyperwave. Часть 2: Сервисы платформы

Курс «Эксплуатация Arenadata Hyperwave. Часть 2: Базовые компоненты» предназначен для получения расширенных знаний по сервисам экосистемы Hadoop и работы с компонентами обработки и анализа данных

 

Сертификация

  • Слушателям, успешно прошедшим сертификацию, выдается именной вендорский сертификат.
  • Слушателям курса предоставляется 2 попытки для прохождения проверки знаний.

 

Необходимая предварительная подготовка:

  • прошел курс «Эксплуатация Arenadata Hyperwave ч1 Базовые компоненты» (либо имел знания в сопоставимом объеме);
  • имел базовые знания Linux (работа с консолью, файловой системой, пользователями, сетевыми настройками);
  • понимал основные принципы сетевых взаимодействий (IP-адресация, DNS, SSH, порты);
  • обладал начальными знаниями об архитектуре распределённых систем и принципах хранения данных;
  • умел читать и редактировать конфигурационные файлы (YAML, XML, INI);
  • имел представление о Big Data-концепциях — что такое Data Lake, Data Warehouse, партиционирование данных, отказоустойчивость;
  • имел базовые знания SQL (SELECT, JOIN, фильтрация, агрегирование);
  • имел представление о Python на уровне чтения и написания простых скриптов (работа с файлами, логами, API, обработка данных);
  • Желательно (но не обязательно) имел опыт работы с системами мониторинга (Prometheus, Grafana) или управления кластерами (Ambari, ADCM).

80 520₽

Длительность

2 дня (16ч в неделю)

Доступ к курсу

Навсегда в личном кабинете

Документы

Удостоверение о повышении квалификации

Расписание

Дата и место проведения
Начало
Формат
Преподаватель
Стоимость

Кому подойдет этот курс

    системные администраторы и инженеры, уже знакомыме с основами Hadoop (прошедшими курс «Эксплуатация Arenadata Hyperwave ч1 Базовые компоненты»);
    специалисты по обработке данных, аналитики и разработчики, которые хотят освоить экосистему инструментов анализа и хранения больших данных;
    архитекторы и инженеры, разрабатывающие комплексные решения на платформе Arenadata Hyperwave.

Участники получат теоретические знания и практический опыт:

  • по планированию и развёртыванию распределённых вычислительных кластеров на базе дистрибутива Arenadata Hyperwave версии 4 и системы управления Arenadata Cluster Manager;
  • работе с сервисами и компонентами платформы Arenadata Hyperwave;
  • мониторингу и оптимизации производительности системы;
  • обслуживанию и аварийному восстановлению узлов кластера и отдельных компонент.

Программа курса

13 модулей
Модуль 1. HBase

·        Основные понятия и примеры операций.

·        Установка и конфигурирование (GC, Memstore, Compression, Load balancing, Flush).

·        High Availability.

·        Работа с утилитами HBase (check, repair).

 


Модуль 2. Phoenix

·        Основные операции с данными.


Модуль 3. Hive

·        Примеры запросов Hive.

·        Основные понятия и примеры операций.

·        Установка и конфигурирование.

·        High Availability HiveServer.

·        Работа с утилитами Hive (schema-tool).

·        Работа с Tez UI.

·        Оптимизация запросов Hive.

·        Лабораторная работа.


Модуль 4. Impala

·        Архитектура и конфигурирование.


Модуль 5. Spark

·        Основные понятия и операции.

·        Установка и конфигурирование.

·        Работа со Spark UI.

·        Примеры кода.

 


Модуль 6. Работа с Livy сервером (REST API)
Модуль 7. Kyuubi

·        Архитектура, подключение и примеры операций.

·        Установка и конфигурирование.

 


Модуль 8. HUE

·        Установка, конфигурирование и обзор UI.


Модуль 9. Iceberg

·        Основные возможности.

·        Архитектура таблиц Iceberg.

·        Обслуживание таблиц Iceberg.

·        Лабораторная работа.


Модуль 10. Trino

·        Архитектура.

·        Установка и конфигурирование.

·        Конфигурационные файлы.

·        Коннекторы.

·        Лабораторная работа.


Модуль 11. Интеграция Ozone с сервисами кластера
Модуль 12. Взаимодействие сервисов Arenadata Hyperwave на ETL-стенде, демонстрация нагрузки
Итоговое тестирование

Как проходит обучение на платформе ФОРС

[ 01 ]

Знакомство с платформой

Платформа учебного центра ФОРС предназначена для удобного и комфортного обучения. Доступ к материалам будет открыт сразу после приобретения курса, а также навсегда доступен в личном кабинете.

[ 02 ]

Обучение

Каждый раздел содержит уроки с теоретическими материалами в видео и текстовых форматах, а так же демонстрацию практических примеров от преподавателей. Самостоятельная работа поможет закрепить полученные знания.

[ 03 ]

Обратная связь и поддержка

Мы поддерживаем онлайн-ресурс, где слушатели всегда могут задать вопрос преподавателю или коллективно обсудить возможные проблемы с другими студентами. Вы всегда сможете получить необходимую информацию в личном кабинете.

[ 04 ]

Дипломы и сертификаты

Все документы об окончании курсов собраны в одном месте в электронном формате — вы всегда можете посмотретьи скачать их в личном кабинете.

Остались вопросы?

Оставьте свои контактные данные — мы с вами свяжемся и все расскажем

Нажимая на кнопку «Отправить», я принимаю условия Политики конфиденциальности, и даю согласие на обработку персональных данных

WhatsApp
Telegram