Перейти к основному содержимому

Мониторинг кластера, групп нод и нод ClickHouse

Последнее изменение:

В облачных базах данных ClickHouse можно отслеживать состояние кластера, групп нод и нод в панели управления.

Вы можете:

Состояние кластера указывает на исправность его нод. Статусы показывают операции с кластером, группами нод и нодами. Вы можете посмотреть историю операций.

Для более детального анализа можно посмотреть метрики нод кластера в виде графиков в панели управления.

При анализе графиков учитывайте, что время в панели управления соответствует времени на вашем устройстве и не зависит от региона, где размещен кластер.

примечание

Например, вы создали кластер в Ташкенте, в пуле uz-1. На устройстве, с которого вы зашли в панель управления, установлен часовой пояс Москвы. Время на графиках метрик будет отображаться в часовом поясе Москвы.

Посмотреть состояние кластера

  1. В панели управления в верхнем меню нажмите Продукты и выберите Облачные базы данных.

  2. Откройте вкладку Активные.

  3. В карточке кластера посмотрите его состояние.

    RunningКластер работает исправно
    Degraded

    Одна или несколько нод недоступны или работают с ограничениями. Проверьте статусы нод. Если причины не удалось выяснить самостоятельно, создайте тикет

    Down

    Все ноды кластера недоступны, создайте тикет

    Unknown

    Кластер создается или его состояние неизвестно. Если это состояния у кластера со статусом, отличным от CREATING, создайте тикет

Посмотреть статусы кластера и групп нод

  1. В панели управления в верхнем меню нажмите Продукты и выберите Облачные базы данных.

  2. Откройте вкладку Активные.

  3. В карточке кластера посмотрите статусы кластера и групп нод.

Статусы кластера

CREATINGКластер создается
ACTIVEКластер активен, операции над ним не проводятся
UPDATINGКластер обновляется
RESIZING

Кластер масштабируется

REBUILDINGНоды кластера пересоздаются
LOCKINGВыполняется блокировка кластера
LOCKED

Кластер заблокирован.

Статус может появиться из-за блокировки ресурсов, если на балансе недостаточно средств. Чтобы разблокировать кластер, пополните баланс.

Если причину блокировки не удалось выяснить самостоятельно, создайте тикет

UNLOCKINGВыполняется разблокировка кластера
DELETINGКластер удаляется
DELETEDКластер удален
MAINTENANCEВыполняется техническое обслуживание кластера
ERRORПроизошла ошибка, создайте тикет

Статусы групп нод

CREATINGГруппа нод создается
ACTIVEГруппа нод активна, операции над ней не проводятся
UPDATINGГруппа нод обновляется
RESIZING

Группа нод масштабируется. При выполнении этой операции такой же статус присваивается кластеру и нодам масштабируемой группы. Остальным группам нод в кластере, кроме ClickHouse Keeper, присваивается статус UPDATING

DELETING

Группа нод удаляется. При выполнении этой операции остальным группам нод в кластере, кроме ClickHouse Keeper, присваивается статус UPDATING

DELETEDГруппа нод удалена
ERRORПроизошла ошибка, создайте тикет

Посмотреть статусы нод в группах нод

  1. В панели управления в верхнем меню нажмите Продукты и выберите Облачные базы данных.

  2. Откройте вкладку Активные.

  3. Откройте страницу кластера → вкладка Подключение.

  4. В блоке Адреса для подключения в строке ноды посмотрите столбец Статус.

    CREATINGНода создается
    ACTIVEНода активна, операции над ней не проводятся
    UPDATINGНода обновляется
    RESIZING

    Нода масштабируется. Этот статус появляется, когда масштабируется группа нод, в которой находится нода

    DELETINGНода удаляется
    DELETEDНода удалена
    DISK FULL

    Диск ноды заполнен, нода работает только на чтение. Чтобы нода работала на чтение и запись, очистите диск или масштабируйте группу нод и выберите конфигурацию с размером диска больше, чем в предыдущей конфигурации

    DOWN

    Нода недоступна, создайте тикет

    ERRORПроизошла ошибка, создайте тикет

Посмотреть историю операций

  1. В панели управления в верхнем меню нажмите Продукты и выберите Облачные базы данных.
  2. Откройте вкладку Активные.
  3. Откройте страницу кластера → вкладка История операций.
  4. Посмотрите операции.

Посмотреть метрики нод кластера

  1. В панели управления в верхнем меню нажмите Продукты и выберите Облачные базы данных.
  2. Откройте вкладку Активные.
  3. Откройте страницу кластера → вкладка Мониторинг.
  4. Выберите группу нод.
  5. Если в группе несколько нод, выберите ноду, метрики которой вы хотите посмотреть.
  6. Посмотрите доступные метрики нод кластера.

Метрики нод кластера в панели управления

ПамятьЗанятая память без учета кэша и буферов операционной системы в процентах или гигабайтах
vCPUНа сколько процентов загружены ядра нод кластера
CPU iowaitCколько процентов времени процессор потратил на ожидание ввода/вывода
Диск

Занятое место на диске в процентах или гигабайтах. Учитывает часть дискового пространства, зарезервированную под служебные нужды и недоступную для размещения баз данных. Подробнее о резервировании дискового пространства в инструкции Использование дискового пространства в кластере ClickHouse

Load Average

Среднее значение загрузки системы за период времени. Показывает, какое количество процессов обрабатывается ядрами кластера. Показатель представлен в виде трех значений — за одну минуту, пять минут и 15 минут. Эти значения должны быть не больше, чем количество ядер на ноде

OOM

Количество процессов, которые завершились ошибкой Out of Memory из-за нехватки оперативной памяти

Нагрузка диска

Скорость чтения и записи данных в КБ/с или количество операций чтения и записи в секунду

Нагрузка сетиКоличество бит или пакетов, отправленных и принятых через сетевой интерфейс