Supervisión del clúster de Kubernetes: descripción general e introducción a Prometheus

Consideremos el concepto de monitorear Kubernetes, familiaricémonos con la herramienta Prometheus y hablemos sobre alertas.

El tema del seguimiento es voluminoso, no se puede analizar en un artículo. El propósito de este texto es proporcionar una descripción general de las herramientas, conceptos y enfoques.

El material del artículo es un extracto de una conferencia abierta de la escuela Slurm . Si desea completar la capacitación completa, regístrese en el curso sobre Infraestructura de monitoreo y registro en Kubernetes .

Qué se supervisa en un clúster de Kubernetes

Servidores físicos. Si se implementa un clúster de Kubernetes en sus servidores, debe monitorear su estado. Esta tarea está a cargo de Zabbix; si trabaja con él, entonces no necesita negarse, no habrá conflictos. Es Zabbix quien monitorea el estado de nuestros servidores.

Pasemos al monitoreo a nivel de clúster.

Componentes del plano de control: API, Scheduler y otros. Como mínimo, debe monitorear que la API de los servidores o etcd sea mayor que 0. Etcd puede proporcionar muchas métricas: sobre los discos en los que gira, sobre el estado de su clúster etcd, y otras.

Docker : . Docker, , , .

DNS. DNS, Discovery, . , , DNS . CoreDNS.

Ingress. ( Ingress Controller) .

— , .

, , , . : , ; 10, 2. . . , : -? , , — . .

, -: , .

Prometheus

— Prometheus. , Prometheus . , « Kubernetes», Prometheus.

, Prometheus: Helm Prometheus Prometheus Operator.

1. Prometheus. , ConfigMap — , , , .
2. Prometheus Operator , , : , , .

, Prometheus. , : , . Prometheus Operator , .

Prometheus Kubernetes: API Server .

Prometheus , . , Prometheus , , . . , PostgreSQL Exporter: PostgreSQL Prometheus, Prometheus .

Prometheus

Prometheus Server — , Prometheus. .

time series database (TSDB). TSDB — , Go, Prometheus. , .

TSDB



Prometheus . 15 . , : TSDB , . Prometheus .



, , . TSDB « », . , , InfluxDB, ClickHouse . ClickHouse.

Prometheus Server pull: , . : « API Server», n- .

(job cron job), , Pushgateway. : job , , Pushgateway . Prometheus Pushgateway.

Prometheus — Alertmanager. — alerting rules. , alert , API 0. , alert alert manager . alert manager : - , , . Slack, Telegram, email .

- Prometheus — Discovering. Prometheus , . « IP-, — », , (targets — ). Prometheus , , , .

Kubernetes, : 10 , 3. IP- , , — Discovering .

Prometheus PromQL. , .

https://prometheus.io/docs/prometheus/latest/querying/basics/

 

    container_memory_usage_bytes

 

    container_memory_usage_bytes / 1024 / 1024

 

    sum(container_memory_usage_bytes) / 1024 / 1024

 

    100 - avg by (instance) (rate(node_cpu_seconds_total{mode="idle"}[5m]) * 100)

- Prometheus

Prometheus , -. .

Expression PromQL.

Alerts — alerting rules, :

1. inactive — , , ;
2. pending — , , . , : , ;
3. firing — , .

Status , Prometheus. (targets), .

Prometheus Kubernetes.

Grafana

- Prometheus , . , Prometheus Grafana. .

Prometheus Grafana , : GRAFANA SUPPORT FOR PROMETHEUS, .

: Grafana Loki .

: , Kubernetes, Southbridge, .