흔한 모니터링 도구는 무엇이며 어떻게 선택하나요?

Question

Accepted Answer

지형은 기둥별로 — metrics, logs, traces — 나뉘고, 여기에 올인원 managed 플랫폼이 더해집니다. 선택은 **self-hosted vs managed**로 귀결되며, 팀 규모·예산·스케일이 좌우합니다.

## 기둥별 도구

```text
METRICS    Prometheus  → pull 기반 scraping, time-series DB, PromQL 쿼리 언어
           Grafana     → Prometheus(및 여러 소스) 위의 dashboard

LOGS       ELK         → Elasticsearch + Logstash + Kibana (강력하지만 운영이 무거움)
           Loki        → "logs용 Prometheus": 저렴, full text가 아닌 label을 인덱싱

TRACES     Jaeger      → distributed tracing, OpenTelemetry 호환
           Tempo       → Grafana/Loki와 짝을 이루는 trace 백엔드

ALL-IN-ONE Datadog     → managed metrics + logs + traces + APM를 한 제품에
```

## 왜 Prometheus + Grafana가 흔한 오픈소스 코어인가

Prometheus는 scrape하는 target(서비스가 `/metrics` 노출)에서 metric을 **pull**하고, time-series DB에 저장하며, **PromQL**로 쿼리합니다. Pull은 target을 발견하고 health-check하기 쉽게 합니다. Grafana는 그 위에서 시각화합니다. Loki와 Tempo는 같은 스택을 logs와 traces로 확장하며, 모두 하나의 Grafana UI에서 쿼리 가능합니다.

```promql
# PromQL: 5분 동안 route별 error 비율
sum by (route) (rate(http_requests_total{status=~"5.."}[5m]))
  / sum by (route) (rate(http_requests_total[5m]))
```

## self-hosted vs managed 트레이드오프

```text
SELF-HOSTED (Prometheus/Grafana/Loki/Tempo)
  ✓ host당 청구 없음, 완전한 통제, 데이터가 인프라를 떠나지 않음
  ✗ 직접 운영·스케일·패치; storage & HA는 당신의 몫

MANAGED (Datadog, Grafana Cloud)
  ✓ 운영 부담 없음, 통합 기본 제공, 알아서 스케일
  ✗ host/볼륨에 따라 비용 급증; 일부 vendor lock-in
```

## 고르는 법

```text
작은 팀 / 빠듯한 예산      → self-hosted Prometheus + Grafana (+ Loki)
빠르게 움직이는 ops 적은 팀  → managed (Datadog / Grafana Cloud)
대규모 / 엄격한 비용       → 코어는 self-host하되 ops 팀 예산을 확보
```

## 왜 중요한가

보편적으로 최고인 도구는 없습니다 — 당신의 제약에 맞는 것만 있을 뿐입니다. 5인 스타트업은 HA Elasticsearch 클러스터를 운영하려다 익사하고, 대기업은 self-host할 수 있는 managed 플랫폼에 연간 6자리를 태울 수 있습니다. 각 도구가 무엇을 하는지와 self-hosted-vs-managed 트레이드오프를 알면, 유행을 맹목적으로 따르는 대신 observability를 팀 규모·예산·스케일에 맞출 수 있습니다.