+7 495 150 96 00
Проектирование и разработка в ClickHouse
Курс для разработчиков и архитекторов, которым важны скорость и надёжность аналитики. Разберём типы данных и движки таблиц, эффективные схемы, запросы и их оптимизацию, проекции и материализованные представления, шардирование и репликацию, интеграции и мониторинг. От теории — к практике
- 4 дня / 32 академических часа
- баланс теории и практики: упражнения и кейсы к каждому модулю
- живые вебинары с тренером и самостоятельная работа
- именной сертификат Академии АйТи
- 4 дня / 32 академических часа
- баланс теории и практики: упражнения и кейсы к каждому модулю
- живые вебинары с тренером и самостоятельная работа
- именной сертификат Академии АйТи
Кому подойдет курс
- Разработчикам и инженерам данных — чтобы проектировать быстрые схемы и писать эффективные запросы
- Администраторам СУБД — чтобы понимать особенности ClickHouse и совместно с разработчиками повышать производительность
- Архитекторам данных — чтобы спроектировать масштабируемую и отказоустойчивую платформу
- Техлидам и аналитикам — чтобы уверенно выбирать подходы к хранению и интеграции данных
Что будет на курсе
Почему наш курс
-
Карьерный трек
Узнавайте об открытых вакансиях и стажировках в ГК Softline в числе первых! -
Помощь
в трудоустройствеРазместим резюме выпускников в кадровом резерве ГК Softline -
В ногу со временем
Практика с актуальными данными и современными датасетами -
Учитесь у лучших
Половина курса — живые вебинары с преподавателем
-
Карьерный трек
Узнавайте об открытых вакансиях и стажировках в ГК Softline в числе первых! -
Помощь в трудоустройстве
Разместим резюме выпускников в кадровом резерве ГК Softline -
В ногу со временем
Практика с актуальными данными и современными датасетами -
Учитесь у лучших
Половина курса — живые вебинары с преподавателем
Программа курса
- Преимущества ClickHouse для аналитики больших данных.
- Архитектура и особенности работы ClickHouse.
- Обзор терминологии и ключевых понятий.
- Сравнение с другими СУБД (PostgreSQL, MySQL и т.д.).
- Типы данных: простые и сложные (Array, Tuple, Map, Nested, Nullable).
- Специфика работы с данными в ClickHouse.
- Преимущества и ограничения типов данных для работы с большими объемами.
- Использование движков таблиц: MergeTree, ReplacingMergeTree, SummingMergeTree, AggregatingMergeTree.
- Основы языка запросов ClickHouse.
- Применение фильтрации, агрегации и группировки данных.
- Работа с джойнами, включая ассоциативные джойны и ASOF джойны.
- Оптимизация запросов с использованием WHERE, PREWHERE, индексов и кластерных запросов
- Профилирование запросов с помощью EXPLAIN и таблиц system.query_log.
- Методы оптимизации: индексы, использование примитивов для фильтрации, оптимизация агрегации.
- Оптимизация работы с большими объемами данных (управление памятью, многозадачность).
- Подходы к быстрому анализу и обработке данных в ClickHouse.
- Основы настройки и создания кластеров ClickHouse.
- Репликация данных, настройка отказоустойчивости.
- Управление шардированием и распределение нагрузки.
- Использование ядра ReplicatedMergeTree для репликации.
- Что такое проекции и как они ускоряют запросы.
- Создание и использование материализованных представлений.
- Управление обновляемыми материализованными представлениями для преобразования данных.
- Применение оконных функций и их влияние на производительность.
- Интеграция с Kafka для потоковой обработки данных.
- Взаимодействие ClickHouse с другими СУБД (PostgreSQL, MySQL, MongoDB).
- Использование внешних таблиц для интеграции и выгрузки данных.
- Настройка интеграции с системами мониторинга и аналитики.
- Вставка данных: механика загрузки данных в ClickHouse.
- Использование различных типов вставки и опций слияния.
- Применение TTL для управления временем жизни данных.
- Обработка непрерывной загрузки данных и использование интеграционных таблиц.
- Использование системных таблиц для мониторинга работы ClickHouse.
- Как диагностировать проблемы с производительностью: анализ запросов, времени ответа, загрузки процессора и памяти.
- Применение инструментов мониторинга, таких как Prometheus и Grafana, для отслеживания состояния ClickHouse.
- Разбор типичных проблем и узких мест в производительности.
- Стратегии резервного копирования и восстановления данных в ClickHouse.
- Настройка автоматического бэкапа данных.
- Управление версиями и восстановление после сбоев.
- Реальные примеры использования ClickHouse для аналитики больших данных.
- Кейсы из практики по проектированию архитектуры ClickHouse.
- Лучшие практики по оптимизации и масштабированию ClickHouse
Вам будут помогать
Эксперты-практики
Опытные специалисты помогают с задачами и отвечают в течение 15 минут. Они сами прошли наши курсы и понимают все сложности новичков.
Опытные преподаватели
Умеют объяснять сложные вещи простыми словами.
Спреведливые ревьюверы
Оценивают проделанную работу и дают развернутую обратную связь.
Внимательные кураторы
Следят за прогрессом обучения, всегда готовы поддержать, подбодрить и помочь в решении организационных вопросов.
Закрытое сообщество
Совместный чат, где можно задать любые вопросы из области анализа данных и программирования.
После курса вы сможете
- Проектировать эффективные схемы данных и выбирать подходящий движок таблиц
- Писать быстрые запросы, использовать WHERE/PREWHERE и индексы, профилировать и ускорять
- Настраивать репликацию, шардирование и кластеры для масштабирования и отказоустойчивости
- Применять проекции и материализованные представления для ускорения аналитики
- Интегрировать ClickHouse с Kafka и другими СУБД, настраивать мониторинг
- Организовывать непрерывную загрузку, управлять хранением (TTL) и делать резервные копии.
Стоимость обучения
Курс "Проектирование и разработка в ClickHouse"
Базовый тариф
55 000₽
- 32 академических часа
- реальные бизнес-кейсы на практике
- поддержка куратора и преподавателя
- общий чат с экспертами в области
- домашние задания и практикумы
Оплачивайте курс так, как удобно
- Беспроцентная рассрочка или оплата частямиВыберите удобный срок рассрочки на этапе оплаты - от 4 до 24 месяцев.
- Единовременно со скидкой 13%Оформите налоговый вычет и верните до 13% от стоимости обучения.
- Не подойдет - вернем оплатуЕсли за две недели курс вам не подойдет, вернем полную стоимость. Позже - за вычетом пройденных уроков.
Повышайте квалификацию за счет компании! Получите нужные навыки и развивайтесь в профессии - обучение может оплатить вам ваш работодатель
Оставьте заявку
[В ближайшее время с Вами свяжется менеджер]
ОБРАЗОВАТЕЛЬНАЯ ЭКОСИСТЕМА
НАПРАВЛЕНИЯ ОБУЧЕНИЯ
СЕРВИСЫ
Через обучение - к успеху! Знания работают на вас