ClickHouse: разработка, оптимизация и эксплуатация

Главная

Курсы

Аналитика данных

F.CH.AD

ClickHouse: разработка, оптимизация и эксплуатация

Курс посвящен изучению ClickHouse — высокопроизводительной колоночной системы управления базами данных, предназначенной для аналитической обработки больших объемов информации в режиме реального времени. Программа охватывает полный цикл работы с платформой.

В ходе обучения слушатели познакомятся с особенностями проектирования схем данных, освоят язык запросов ClickHouse, научатся выбирать оптимальные движки таблиц, использовать материализованные представления и проекции.

75 000₽

Длительность

4 дня (32ч в неделю)

Доступ к курсу

Навсегда в личном кабинете

Документы

Удостоверение о повышении квалификации

Количество слушателей

Укажите чтобы рассчитать скидку

Не подходит расписание? Выберите дату и форму обучения удобную для вас!

Выбрать свою дату

Для корпоративных клиентов

Модуль. Архитектура ClickHouse и основы работы

• Назначение и преимущества ClickHouse для аналитической обработки больших объемов данных.
• Архитектура системы и принципы ее функционирования.
• Основные термины, концепции и элементы платформы.
• Сравнение ClickHouse с популярными реляционными СУБД (PostgreSQL, MySQL и др.).

Модуль. Моделирование данных и работа с таблицами

• Обзор поддерживаемых типов данных: базовые и составные (Array, Tuple, Map, Nested, Nullable).
• Особенности хранения и обработки данных в ClickHouse.
• Выбор оптимальных типов данных для аналитических нагрузок.
• Использование движков таблиц MergeTree, ReplacingMergeTree, SummingMergeTree и AggregatingMergeTree для различных сценариев хранения данных.

Модуль. Язык запросов ClickHouse

• Синтаксис и основные возможности языка запросов ClickHouse.
• Фильтрация, агрегация, сортировка и группировка данных.
• Использование различных типов JOIN, включая ASOF JOIN и ассоциативные соединения.
• Повышение эффективности запросов с помощью WHERE, PREWHERE, индексов и распределенного выполнения запросов.

Модуль. Оптимизация производительности

• Анализ выполнения запросов с использованием EXPLAIN и системной таблицы system.query_log.
• Практические методы повышения производительности запросов.
• Оптимизация обработки больших объемов данных, управление памятью и использование многопоточности.
• Лучшие практики ускорения аналитических вычислений в ClickHouse.

Модуль. Кластеризация и репликация

• Построение и настройка кластерной архитектуры ClickHouse.
• Организация репликации данных и обеспечение высокой доступности.
• Настройка шардирования и балансировки нагрузки.
• Применение движка ReplicatedMergeTree для создания отказоустойчивых решений.

Модуль. Проекции и материализованные представления

• Принципы работы проекций и их влияние на скорость выполнения запросов.
• Создание и сопровождение материализованных представлений.
• Использование обновляемых материализованных представлений для трансформации данных.
• Применение оконных функций и анализ их влияния на производительность.

Модуль. Интеграция с внешними системами

• Подключение ClickHouse к Apache Kafka для потоковой обработки данных.
• Интеграция с PostgreSQL, MySQL, MongoDB и другими источниками данных.
• Использование внешних таблиц для обмена и миграции данных.
• Настройка взаимодействия с системами мониторинга и аналитики.

Модуль. Загрузка и управление большими объемами данных

• Механизмы загрузки данных в ClickHouse.
• Способы вставки данных и особенности процессов слияния (Merge).
• Использование TTL для автоматического управления жизненным циклом данных.
• Организация непрерывной загрузки данных с применением интеграционных таблиц.

Модуль. Мониторинг и диагностика

• Использование системных таблиц для контроля состояния ClickHouse.
• Анализ производительности на основе времени выполнения запросов, использования процессора и памяти.
• Настройка мониторинга с помощью Prometheus и Grafana.
• Выявление и устранение типичных проблем, влияющих на производительность системы.

Модуль. Резервное копирование и восстановление

• Подходы к организации резервного копирования данных в ClickHouse.
• Настройка автоматизированных процедур создания резервных копий.
• Восстановление данных после сбоев и управление версиями резервных копий.

У этого курса пока нет отзывов. Ниже представлены отзывы по другим курсам учебного центра.

Алексей Забелин

О курсе "Практический курс «Администрирование кластера YDB»"

В целом для начинающих кто не знаком с YDB курс хороший. Но мне как уже знакомому с настройкой и администрированием хотелось бы более углубленный вещи которые не очевидны из документации сложные кейсы и т.д. Возможно например создать отдельный курс.

Ирина Балабанова

О курсе "Безопасная разработка программного обеспечения"

Благодарю, курс объемный, много информации. Благодарю за шаблоны документов.

Даниил Жаринов

О курсе "Автоматизация с использованием Ansible: Полное погружение"

Было очень интересно и лично для меня полезно. Единственный минус - то, что всё это проходит на буднях в рабочее время. Конфликтует сильно с рабочими обязанностями

Никита Авакумов

О курсе "Автоматизация с использованием Ansible: Полное погружение"

Хороший курс. Всё очень понятно и доступно. Много практики на удобном стенде. Было интересно.

Виктор Ломов

О курсе "Курс по нейросетям: LLM Alchemy - Высшее искусство обучения локальных моделей"

Очень объёмный и структурированный курс. Охватывает все необходимые аспекты для самостоятельного применения технологий.

Андрей Крупин

О курсе "Безопасная разработка программного обеспечения"

Курс понравился. Примеры документов в раздаточном материале особенно полезны

Виктор Шульгин

О курсе "Основы SQL: создание переносимого кода"

Курс был полезен, больше подходит для новичков, так как это основа. Но при этом преподаватель, когда рассказывал углублял и разворачивал темы.

Станислав Сивов

О курсе "Миграция с Oracle на Postgres: Подходы, проблемы и решения. Практический курс"

Курс был полезен. Показал проблемы и методы решение при миграции с Oracle на PostgerSQL

Игорь Модин

О курсе "Администрирование PostgreSQL 16. Резервное копирование и репликация"

С одной стороны - темы известные, с другой - обнаружился ряд нюансов, о которых я не знал.

Валерий Шуманов

О курсе "PostgreSQL 16. Оптимизация запросов"

Преподаватель хорошо ориентируется в теме, эрудирован и остроумен. Слушать было очень интересно. Это лучший преподаватель!

Анонимно

О курсе "Oracle GoldenGate 19c: Fundamentals for Oracle"

Хороший курс. Помог понять данную тему, освежить и структурировать имеющиеся знания. Преподаватель ответил на все возникшие вопросы.

Анонимно

О курсе "Безопасная разработка программного обеспечения"

Хорошая подача материала, с достаточной детализацией. С реальными примерами из практики.

Роман Мазниченко

О курсе "Безопасная разработка программного обеспечения"

По самому курсу замечаний нет, кроме наверное того, что первый день проходит немного скучновато без практики. Во второй день курс разгоняется и такой же хороший темп курс держит и третий день. Качество связи и подача материала на высоте. Кроме того, хочется отметить, что мне как разработчику этот курс не совсем подходит по формату, но из практических занятий кое-что почерпнул для себя. Спасибо.

Максим Макаров

О курсе "Сетевое администрирование ОС Astra Linux Special Edition 1.8"

Курс понравился, рассказана специфика работы Astra Linux с базовым набором ПО

Игорь Модин

О курсе "PostgreSQL 16. Оптимизация запросов"

Полезный курс. Для ДБА особенно. Т.к. умение читать планы - это близко к высшему пилотажу.

Николай Величко

О курсе "Мониторинг баз данных при помощи Zabbix"

Отличный и информативный курс, подчерпнул то что хотел. Спасибо

Абдусамеъ Очил-зода

О курсе "Администрирование PostgreSQL 16. Базовый курс"

Очень положительные впечатления от курса. Преподаватели сильные. На вопросы отвечают полноценно. Будут рекомендовать курс коллегам.

Аксиев Тимур Рахмедович

О курсе "Администрирование PostgreSQL 16. Настройка и мониторинг"

Очень интересный курс, позволяющий заглянуть в механику процессов СУБД. Не совсем соответствует названию, но от этого не менее интересен. Преподаватель грамотный

Алексей

О курсе "Администрирование PostgreSQL 16. Настройка и мониторинг"

Курс понравился. Преподаватель все доступно объясняет. Техническое обеспечение на уровне.

Анонимно

О курсе "Администрирование PostgreSQL 16. Базовый курс"

Курс начальный, но интересен в части практического опыта преподавателя и его сравнения поведения различных СУБД в штатных ситуациях.

Как проходит обучение на платформе ФОРС

[ 01 ]

Знакомство с платформой

Платформа учебного центра ФОРС предназначена для удобного и комфортного обучения. Доступ к материалам будет открыт сразу после приобретения курса, а также навсегда доступен в личном кабинете.

[ 02 ]

Обучение

Каждый раздел содержит уроки с теоретическими материалами в видео и текстовых форматах, а так же демонстрацию практических примеров от преподавателей. Самостоятельная работа поможет закрепить полученные знания.

[ 03 ]

Обратная связь и поддержка

Мы поддерживаем онлайн-ресурс, где слушатели всегда могут задать вопрос преподавателю или коллективно обсудить возможные проблемы с другими студентами. Вы всегда сможете получить необходимую информацию в личном кабинете.