Какие распространённые инструменты мониторинга существуют и как выбрать между ними?

Question

Accepted Answer

Ландшафт разделяется по направлениям — метрики, логи, трассировка — плюс универсальные управляемые платформы. Выбор сводится к **self-hosted vs managed**, определяемый размером команды, бюджетом и масштабом.

## Инструменты по направлениям

```text
METRICS    Prometheus  → pull-based scraping, time-series DB, PromQL query language
           Grafana     → dashboards on top of Prometheus (and many other sources)

LOGS       ELK         → Elasticsearch + Logstash + Kibana (powerful, heavy to run)
           Loki        → "Prometheus for logs": cheap, indexes labels not full text

TRACES     Jaeger      → distributed tracing, OpenTelemetry-compatible
           Tempo       → trace backend that pairs with Grafana/Loki

ALL-IN-ONE Datadog     → managed metrics + logs + traces + APM in one product
```

## Почему Prometheus + Grafana — это распространённое ядро open-source

Prometheus **вытягивает** метрики из целевых систем, которые он скрейпит (сервис выставляет `/metrics`), сохраняет их в временную базу данных и запрашивает через **PromQL**. Pull-подход упрощает обнаружение целей и проверку здоровья. Grafana размещается сверху для визуализации. Loki и Tempo расширяют один и тот же стек на логи и трассировку, все запрашиваемые из одного UI Grafana.

```promql
# PromQL: per-route error ratio over 5 minutes
sum by (route) (rate(http_requests_total{status=~"5.."}[5m]))
  / sum by (route) (rate(http_requests_total[5m]))
```

## Компромиссы между self-hosted и managed

```text
SELF-HOSTED (Prometheus/Grafana/Loki/Tempo)
  ✓ no per-host bill, full control, no data leaves your infra
  ✗ you run, scale, and patch it; storage & HA are your problem

MANAGED (Datadog, Grafana Cloud)
  ✓ no ops burden, integrations out of the box, scales for you
  ✗ costs grow fast with hosts/volume; some vendor lock-in
```

## Как выбрать

```text
Small team / tight budget   → self-hosted Prometheus + Grafana (+ Loki)
Fast-moving, ops-light team  → managed (Datadog / Grafana Cloud)
Large scale / strict cost    → self-host the core, but budget for the ops team
```

## Почему это важно

Нет универсально лучшего инструмента — только подходящего под ваши ограничения. Стартап из 5 человек захлебнётся, пытаясь управлять HA кластером Elasticsearch; крупное предприятие может тратить шесть цифр в год на управляемую платформу, которую оно могло бы размещать самостоятельно. Понимание того, что делает каждый инструмент и каков компромисс между self-hosted и managed, позволяет подобрать observability под размер команды, бюджет и масштаб вместо копирования популярных решений.