Примеры запросов к метрикам Prometheus

Используемые термины: Prometheus.

Данную инструкцию можно использовать как шпаргалку для работы с Prometheus в части, касающейся выборки данных (использование PromQL). Мы попробуем описать процесс получения данных, а также будут приведены примеры извлечения наиболее значимых показателей.

Синтаксис запросов

Рассмотрим синтаксис некоторых функций, которые мы будем использовать в нашей инструкции. Проверять все наши запросы можно в веб-интерфейсе прометеуса на странице /graph.

irate или rate

В Prometheus значения для счетчиков всегда возрастают, но как правило, нам нужно знать изменение значения за определенный момент времени. Запрос будет выглядеть так:

avg by

Среднее значение по условию, например:

... среднее для каждого инстанса.

avg_over_time

Среднее значение всех значений для метрик в указанном интервале.

sum

Функция суммирует полученные результаты:

time

Отображает время в формате UNIX TIME.

count

Считает количество значений:

Вместе с by значения могут фильтроваться:

Арифметические операции

1. С полученными числовыми данными можно выполнять различные математические операции. Например, если мы получим значения времени в секундах, то можно его перевести в часы:

Или наоборот

2. Полученный остаток от процентного показателя вычистяется по формуле:

Системная информация

Для начала рассмотрим примеры получения общих системных показателей.

Время работы системы (uptime)

Расчет ведется относительно показателя node_boot_time_seconds (время последнего включения системы).

1. Общее время для всех узлов:

* первый запрос в секундах, второй — в минутах.

2. Для некоторых узлов:

* в данном примере мы получим сумму значений для узлов 192.168.0.15 и 192.168.0.20.

3. Для всех узлов по отдельности:

* данный запрос выведет на экран несколько значений для каждого из узлов.

Температура

Данная метрика поддерживается не всем оборудованием или средствами виртуализации.

1. Для всех нод:

2. Для конкретных:

Процессор

Для получения нужных нам показателей будем использовать метрику node_cpu_seconds_total.

Количество процессоров

1. Общее количество всех процессоров всех узлов:

2. Для некоторых инстансов:

* для 192.168.0.15 и 192.168.0.20.

3. По отдельности:

Нагрузка

1. На все ядра всех узлов:

* первый запрос для отображения процента свободного процессорного времени, второй — процент утилизации.

Пример ответа:

2. Средняя величина по ядрам для всех узлов:

* первый запрос для отображения процента свободного процессорного времени, второй — процент утилизации.

Пример ответа:

3. Средняя величина по ядрам для конкретного узла:

* первый запрос для отображения процента свободного процессорного времени, второй — процент утилизации.

Пример ответа:

Время ожидания

Запрос показывает значение в процентном эквиваленте для времени ожидания процессора. На практике, идеально, когда он равен нулю.

1. Среднее значение за 30 минут для всех узлов:

2. Для конкретного узла:

3. Отдельно по каждой ноде:

Оперативная память

Для наших запросов мы будем использовать метрики:

• node_memory_MemTotal_bytes.
• node_memory_MemFree_bytes.
• node_memory_Cached_bytes.
• node_memory_Buffers_bytes.

Рассмотрим примеры.

Объем памяти

1. Для всех узлов:

2. Для некоторых:

3. По отдельности:

Использование памяти

1. Свободно:

2. Занято:

Пример ответа:

Сеть

Мы будем использовать метрики:

• node_network_receive_bytes_total
• node_network_transmit_bytes_total

Примеры ниже.

Передача данных

1. Входящий трафик за последние 5 минут:

2. Иcходящий трафик за последние 5 минут:

Дисковый накопитель

Используемые метрики:

• node_filesystem_size_bytes.
• node_filesystem_avail_bytes.
• node_filesystem_free_bytes.
• node_disk_read_bytes_total.
• node_disk_written_bytes_total.

Переходим к примерам.

Объемы

1. Объем разделов:

* для конкретных нод или всех.

2. Объем доступного пространства:

3. Объем в процентах.

Используется:

Свободно:

Нагрузка

1. Чтение в килобайтах:

* для конкретного сервера / диска и для всех серверов и всех дисков.

2. Запись в килобайтах:

* для конкретного сервера / диска и для всех серверов и всех дисков.

Читайте также

Другие инструкции по Prometheus:

1. Создание графиков в Grafana на основе данных из Prometheus.

2. Установка Prometheus + Alertmanager + node_exporter на Linux.