[Karpov.courses] ClickHouse: эффективная работа с большими данными (Сергей Евсюков)

[Станцуем]

Решайте аналитические задачи по работе с данными быстрее и эффективнее

Главная задача курса — углубить свои знания ClickHouse и научиться строить системы, способные справляться с любыми объёмами данных.

ClickHouse — мощный инструмент для работы с большими данными, выходящий далеко за рамки базового SQL.
Полученные навыки помогут вам не только решать задачи быстрее, но и стать экспертом в одном из самых востребованных инструментов на рынке данных

Содержание курса:

Введение в Сlickouse

• Понятия OLAP/OLTP
• Колоночные/строковые СУБД
• Кратко про архитектуру СУБД
• Преимущества и недостатки OLAP СУБД

Операторы и синтаксис запросов

• Data Definition Language
• DML (Data Manipulation Language)
• JOIN типы и особенности
• Обновление и удаление данных, особенности
• Оконные функции

Объекты архитектуры

• Таблицы
• Представления
• Математические представления
• Обновляемые математические представления
• Словари

Типы данных и функции

• Логические, цифровые, строковые типы данных
• Дата и время
• Объектные типы (массивы, Json)
• Функции для работы с данными
• Типы ввода и вывода

Табличные движки

• MergeTree Family
• Log Family
• Special
• Integrations

Масштабирование и распределение

• Партиционирование
• Шардирование и репликация
• Настройка шардирования при вставке
• Партиционирование при записи

Обновление и мутация данных

• Мутации обновления данных
• Легкое обновление
• Обновление в ReplacingMergeTree
• Обновление замещением партиций
• TTL и жизненный цикл данных в объектах

Оптимизация запросов

• Оптимизация производительности
• Эффективное партиционирование
• Введение в первичные индексы
• Избегание NULL

Оптимизация архитектуры

• Анализ нагрузки запросов
• CTE и подзапросы
• Параллельные вычисления
• Оптимизация расположения данных

Оптимизация данных

• Критичный объем данных
• Асинхронная вставка
• Компрессия и архивация холодных данных
• Избегание мутаций
• Принудительная финализация мутаций

Показать больше