Proxmox Monitoring mit OpenTelemetry, Prometheus und Grafana
In einem vorherigen Artikel Proxmox Monitoring mit InfluxDB v3 und Grafana habe ich beschrieben, wie Proxmox (öffnet in neuem Tab) seine Metriken über einen kleinen Umweg mit Telegraf an eine InfluxDB v3 sendet. Das funktioniert zuverlässig, ist aber eher eine Notlösung. Aktuelle Versionen von Proxmox VE bieten beim Metric Server zusätzlich den Typ OpenTelemetry an. Da ich für andere Systeme ohnehin bereits Prometheus einsetze, habe ich mein Monitoring nun komplett darauf umgestellt.
Proxmox sendet die Daten per OTLP aktiv an einen Empfänger, Prometheus holt sich Daten dagegen selbst ab. Als Vermittler dient daher ein OpenTelemetry Collector, der in einem kleinen LXC Container betrieben werden kann. Ein eigenes Paketrepository für Debian gibt es dafür nicht, das Paket lässt sich aber direkt von GitHub installieren. Versionsnummern müssen ggf. angepasst werden.
wget https://github.com/open-telemetry/opentelemetry-collector-releases/releases/download/v0.162.0/otelcol-contrib_0.162.0_linux_amd64.deb
apt install ./otelcol-contrib_0.162.0_linux_amd64.deb
Die Konfiguration wird unter /etc/otelcol-contrib/config.yaml abgelegt. Der Collector nimmt die Daten dann auf Port 4318 entgegen und stellt sie auf Port 8889 für Prometheus zur Verfügung.
receivers:
otlp:
protocols:
http:
endpoint: 0.0.0.0:4318
processors:
batch: {}
exporters:
prometheus:
endpoint: 0.0.0.0:8889
translation_strategy: UnderscoreEscapingWithoutSuffixes
resource_to_telemetry_conversion:
enabled: true
service:
pipelines:
metrics:
receivers: [otlp]
processors: [batch]
exporters: [prometheus]
Wichtig ist bei der Konfiguration die Option translation_strategy. Ohne sie hängt der Collector die Einheit an jeden Metriknamen an. Da Proxmox die Einheiten nicht immer gleich setzt, würden sich die Namen einzelner Metriken somit ändern. Nach einem systemctl restart otelcol-contrib ist der Collector bereit für den Einsatz.
In Proxmox wird anschließend auf Datacenter Ebene unter Metric Server ein neuer Eintrag vom Typ OpenTelemetry angelegt. Neben der IP des Collectors und Port 4318 muss das Protokoll auf HTTP gestellt werden.
Prometheus bekommt den Collector als zusätzliches Ziel hinzugefügt.
scrape_configs:
- job_name: proxmox-otel
static_configs:
- targets: ['<collector-ip>:8889']
Wie schon beim Wechsel auf InfluxDB v3 musste ich auch hier das Grafana Dashboard anpassen, diesmal von SQL auf PromQL. Die Metriken heißen nun beispielsweise proxmox_node_cpustat_cpu oder proxmox_vm_mem, wobei VMs und LXC Container über das Label type unterschieden werden. Zähler wie Netzwerk und Disk I/O werte ich mit rate() aus, sodass die Graphen echte Übertragungsraten anzeigen.
Der Umstieg hat sich für mich auf alle Fälle gelohnt. Telegraf und InfluxDB werden in meiner Umgebung nicht mehr benötigt und alle Metriken liegen zentral in Prometheus. Wer Fragen zur Umsetzung hat, dem helfe ich gerne weiter.
Dieser Beitrag von Michael Dönselmann ist, soweit nicht anders angegeben, lizenziert unter einer Creative Commons Namensnennung – Weitergabe unter gleichen Bedingungen 4.0 International Lizenz (öffnet in neuem Tab).

