monitoring: системные дашборды + multi-server (file_sd), readme

stacks/monitoring/README.md

@@ -0,0 +1,35 @@
+# Monitoring stack (fr1)
+
+Prometheus + Grafana + node-exporter + cAdvisor. Живёт на `fr1` в `~/monitoring`, доступ — https://mon.ruzzy.dev.
+
+## Структура
+- `docker-compose.yml` — стек. Grafana пароль через `${GF_ADMIN_PASSWORD}` (`.env`, не в git).
+- `prometheus/prometheus.yml` — scrape-конфиг, таргеты через **file_sd**.
+- `prometheus/targets/node/*.yml`, `prometheus/targets/cadvisor/*.yml` — таргеты (по файлу на сервер).
+- `grafana/provisioning/` — datasource (uid `prometheus`) + дашборды (Node Exporter Full, cAdvisor) как код.
+
+## Запуск
+```bash
+cd ~/monitoring
+echo "GF_ADMIN_PASSWORD=<пароль>" > .env   # один раз
+docker compose up -d
+```
+
+## Добавить новый сервер
+На новом сервере поднять `node-exporter` (:9100) и `cadvisor` (:8080), доступные с fr1 (по приватному туннелю).
+Затем на fr1 добавить таргеты и перечитать конфиг (без рестарта):
+```bash
+# ~/monitoring/prometheus/targets/node/<name>.yml
+- targets: ['<IP-в-туннеле>:9100']
+  labels: { instance: <name> }
+
+# ~/monitoring/prometheus/targets/cadvisor/<name>.yml
+- targets: ['<IP-в-туннеле>:8080']
+  labels: { instance: <name> }
+
+curl -s -X POST http://127.0.0.1:9090/-/reload
+```
+В дашбордах сервер появится в выпадающем списке `instance`.
+
+## Дашборды
+Провижатся автоматически (папка **Infra**): Node Exporter Full (1860), cAdvisor (19792). Datasource — Prometheus (uid `prometheus`).

stacks/monitoring/grafana/provisioning/dashboards/providers.yml

@@ -0,0 +1,12 @@
+apiVersion: 1
+providers:
+  - name: infra
+    orgId: 1
+    folder: Infra
+    type: file
+    disableDeletion: false
+    updateIntervalSeconds: 30
+    allowUiUpdates: true
+    options:
+      path: /etc/grafana/provisioning/dashboards
+      foldersFromFilesStructure: false

stacks/monitoring/grafana/provisioning/datasources/datasource.yml

@@ -1,6 +1,10 @@
 apiVersion: 1
+deleteDatasources:
+  - name: Prometheus
+    orgId: 1
 datasources:
   - name: Prometheus
+    uid: prometheus
     type: prometheus
     access: proxy
     url: http://prometheus:9090

stacks/monitoring/prometheus/prometheus.yml

@@ -9,20 +9,12 @@ scrape_configs:
     static_configs:
       - targets: ['localhost:9090']
 
+  # Хосты: новый сервер = добавить файл в targets/node/<name>.yml + reload
   - job_name: node
-    static_configs:
-      - targets: ['node-exporter:9100']
-        labels:
-          instance: fr1
+    file_sd_configs:
+      - files: ['/etc/prometheus/targets/node/*.yml']
 
+  # Контейнеры
   - job_name: cadvisor
-    static_configs:
-      - targets: ['cadvisor:8080']
-        labels:
-          instance: fr1
-
-  # de1 будет добавлен позже (через туннель AmneziaWG):
-  # - job_name: node-de1
-  #   static_configs:
-  #     - targets: ['10.8.1.X:9100']
-  #       labels: { instance: de1 }
+    file_sd_configs:
+      - files: ['/etc/prometheus/targets/cadvisor/*.yml']

stacks/monitoring/prometheus/targets/cadvisor/fr1.yml

@@ -0,0 +1,3 @@
+- targets: ['cadvisor:8080']
+  labels:
+    instance: fr1

stacks/monitoring/prometheus/targets/node/fr1.yml

@@ -0,0 +1,3 @@
+- targets: ['node-exporter:9100']
+  labels:
+    instance: fr1