МБД.Х - Сводная информация

Дашборд МБД.Х  МБД.Х - Сводная информация отображает сводные показатели кластера Hadoop: доступность узла и его служб, недостающие блоки данных, нагрузку на узел, заполнение файловой системы HDFS и использование памяти сервисами. Данные выводятся для ПАК и узла, выбранных в выпадающих списках в верхней части дашборда. Список доступных узлов ограничен выбранным ПАК.

В показателях файловых систем учитываются только файловые системы Ext4, VFAT и XFS.

Сводная информация

Группа панелей отображает доступность узла, состояние его служб и недостающие блоки данных кластера. В заголовках панелей, относящихся к узлу, выводится его название. Если данных нет, панели выводят значение N/A.

Доступность узла

Результат проверки доступности узла:

  • Up — доступен.

  • Down — недоступен.

Недостающие блоки данных по кластеру

Количество недостающих блоков в файловой системе HDFS суммарно по кластеру.

Состояние zookeeper узла

Состояние службы systemd zookeeper.service на узле:

  • Up — работает.

  • Down — не работает.

Состояние hdfs-namenode узла

Состояние службы systemd hadoop-hdfs-namenode.service на узле:

  • Up — работает.

  • Down — не работает.

Состояние hdfs-datanode узла

Состояние службы systemd hadoop-hdfs-datanode.service на узле:

  • Up — работает.

  • Down — не работает.

Состояние httpfs узла

Результат проверки доступности HttpFS на узле:

  • Up — доступен.

  • Down — недоступен.

Нагрузка на узлы

Группа панелей отображает общесистемные показатели выбранного узла.

Загрузка CPU

График утилизации ресурсов CPU.

Занято RAM

График утилизации оперативной памяти.

Использование дискового пространства

График заполнения дискового пространства по точкам монтирования.

Сетевой трафик

График изменения сетевого трафика узла. Положительные значения соответствуют входящему трафику (Получено), отрицательные — исходящему (Отправлено).

Занято RAM Swap

График заполнения раздела подкачки (swap). Если раздел подкачки отсутствует, выводится значение 0.

Информация о сервисах

Группа панелей отображает использование ресурсов сервисами Hadoop. Данные выводятся для всех узлов выбранного ПАК в виде таблиц со следующими общими колонками:

  • Кластер — название кластера.

  • Узел — название узла.

  • Сервис — название сервиса Hadoop.

Цвет ячейки со значением меняется с зелёного на жёлтый и красный по мере приближения к пороговым значениям.

Загрузка ФС - HDFS

Степень заполнения файловой системы HDFS (колонка Загрузка ФС).

Объём используемой памяти heap - HDFS

Степень утилизации кучи JVM сервисов HDFS (колонка Используемая память).

Объём используемой памяти heap - Hive

Степень утилизации кучи JVM сервисов Hive (колонка Используемая память).

Объём используемой памяти heap - Yarn

Степень утилизации кучи JVM сервисов YARN (колонка Используемая память).

Статистика - Yarn

Использование ресурсов узла сервисом YARN NodeManager:

  • Выделенные ядра — отношение количества выделенных виртуальных ядер к количеству доступных.

  • Выделенная память в ГБ — отношение объёма выделенной памяти к доступному объёму.

Объём используемой памяти heap - Spark

Степень утилизации кучи JVM сервиса Spark History Server (колонка Используемая память).