Мониторинг Linux с помощью Prometheus и Grafana

#linux #prometheus #grafana

Содержание

Введение

В данной статье рассматривается настройка мониторинга Linux с помощью Prometheus и Grafana. Предполагается, что Prometheus и Grafana уже установлены в вашей системе. Если это не так, то вы можете ознакомиться со следующими статьями:

Настройка Node Exporter

Node Exporter — это демон, который позволяет собирать различные метрики Linux в Prometheus. Подробнее о нем можно узнать здесь.

Предварительные настройки

Перед установкой Node Exporter необходимо создать отдельную системную учетную запись, от имени которой будет работать Node Exporter. Это необходимо для ограничения доступа учетной записи, предназначенной только для работы Node Exporter. Для этого

Создайте системную группу с именем node_exporter:
```
sudo groupadd --system node_exporter
```
Создайте системную учетную запись с именем node_exporter:
```
sudo useradd -s /sbin/nologin --system -g node_exporter node_exporter
```

Загрузка и установка

Для загрузки и установки Node Exporter выполните следующие шаги:

Перейдите в папку /tmp:
```
cd /tmp
```
Перейдите на страницу загрузки Node Exporter и скопируйте ссылку на архив требуемой версии.

Загрузите архив с помощью команды wget:

wget https://github.com/prometheus/node_exporter/releases/download/v1.9.1/node_exporter-1.9.1.linux-amd64.tar.gz

Распакуйте архив с помощью команды tar:
```
tar -zxvf node_exporter-1.9.1.linux-amd64.tar.gz
```
Перейдите в разархивированную папку:
```
cd node_exporter-1.9.1.linux-amd64
```
Переместите исполняемый файл node_exporter в папку /usr/local/bin:
```
sudo mv node_exporter /usr/local/bin
```
Измените владельца исполняемого файла на учетную запись node_exporter и группу node_exporter:
```
sudo chown node_exporter:node_exporter /usr/local/bin/node_exporter
```

Настройка демона

Для настройки запуска Node Exporter как демона выполните следующие шаги:

Создайте конфигурационный файл /etc/systemd/system/node_exporter.service со следующим содержимым:

[Unit]
Description=Node Exporter
Wants=network-online.target
After=network-online.target

[Service]
User=node_exporter
Group=node_exporter
Type=simple
ExecStart=/usr/local/bin/node_exporter

[Install]
WantedBy=multi-user.target

Перезапустите конфигурацию systemd:
```
sudo systemctl daemon-reload
```
Запустите демона node_exporter:
```
sudo systemctl start node_exporter
```
Включите демона node_exporter в автозагрузку:
```
sudo systemctl enable node_exporter
```

Проверьте, что node_exporter возвращает метрики:

curl http://localhost:9100/metrics

Пример метрик:

go_gc_duration_seconds{quantile="0"} 1.2448e-05
go_gc_duration_seconds{quantile="0.25"} 1.2448e-05
go_gc_duration_seconds{quantile="0.5"} 1.2448e-05

Настройка Prometheus

Необходимо сообщить Prometheus, что нужно собирать метрики с Node Exporter. Для этого в /etc/prometheus/prometheus.yaml нужно добавить следующие строки:

scrape_configs:
  - job_name: "node_exporter"

    static_configs:
      - targets: ["localhost:9100"]

После этого нужно перезапустить Prometheus:

sudo systemctl restart prometheus

Чтобы проверить, что все работает, нужно:

Зайти в веб-интерфейс Prometheus, который по умолчанию доступен по адресу http://X.X.X.X:9090, где X.X.X.X — IP-адрес вашего сервера.
В веб-интерфейсе на вкладке «Query» запросить какую-нибудь метрику, которую предоставляет Node Exporter, например, node_memory_Active_anon_bytes. Если метрики отображаются, значит все работает.

Также за состоянием сбора метрик можно следить на странице «Status > Target health».

Настройка Grafana

Для визуализации метрик Linux можно создать как свой дашборд, так и воспользоваться существующими. Для этого:

Откройте Grafana Labs, перейдите на страницу подходящего вам дашборда.
Скопируйте ID подходящего вам дашборда.
Откройте Grafana, перейдите на страницу «Dashboards».
На странице «Dashboards» на нажмите «New», «Import».
Вставьте ранее скопированный ID и нажмите «Load».
Выберите название, расположение, а также источник данных для нового дашборда, после чего нажмите «Import».