Büyük ölçekte günlükler, metrikler ve izlemeler için bir gözlemlenebilirlik stratejisi nedir?

Question

Accepted Answer

Gözlemlenebilirlik **üç sütun** üzerine dayanır — **günlükler**, **metrikler** ve **izlemeler** — ve amaç, elle incelemek için çok büyük bir sistem için "ne yanlış ve neden" sorusuna cevap vermektir. Büyük ölçekte, strateji korelasyon, örnekleme ve maliyet hakkındadır.

## Üç sütun

| Sütun | Cevaplar | Araçlar |
|---|---|---|
| Metrikler | Bir şey yanlış mı? (oranlar, gecikme süresi) | Prometheus, Grafana |
| İzlemeler | Akışta nerede? | OpenTelemetry, Jaeger |
| Günlükler | Tam olarak ne oldu? | ELK, Loki |

```text
Metrics alert ─▶ trace pinpoints the slow service ─▶ logs explain the cause
   (broad)              (path)                          (detail)
```

## Onları ilişkilendirin

İzleme/korelasyon kimliği metrik etiketleri, günlük satırları ve yayınlar arasında geçmesi gerekir, böylece bunlar arasında dönersiniz.

```text
log line:  level=error trace_id=abc123 service=payments msg="gateway timeout"
                       ^^^^^^^^^^^^^^^ same id appears in the trace + metrics
```

## Büyük ölçekli endişeler

```text
✓ Standardize: OpenTelemetry across all services
✓ Use structured (JSON) logs — queryable, not grep-only
✓ Sample traces (e.g. keep all errors + 1% of success) to control cost
✓ Define SLOs and alert on symptoms (latency/error rate), not noise
✓ RED/USE method for dashboards (Rate, Errors, Duration)
```

## Tuzak

%100'de her şeyi günlüğe kaydetmek karşılanmaz ve sinyal boğar. Bunun yerine örnek alın, yapılandırın ve SLO'lar hakkında uyarı verin.

## Neden önemli

Yüzlerce hizmetle, SSH'ye giremez ve bakamaz — gözlemlenebilirlik üretim davranışını anlamanın tek yoludur.

Kazanan strateji ilişkili, örneklenmiş ve SLO tarafından yönlendirilir: telemetri depolamasında iflasa girmenizi veya çağrıyı gürültüye gömmeden gerçek sorunları hızlı bir şekilde ortaya çıkarır.

Metrikler	Bir şey yanlış mı? (oranlar, gecikme süresi)	Prometheus, Grafana
İzlemeler	Akışta nerede?	OpenTelemetry, Jaeger
Günlükler	Tam olarak ne oldu?	ELK, Loki