عام نگرانی کے اوزار کیا ہیں اور آپ ان کے درمیان کیسے انتخاب کرتے ہیں؟

Question

Accepted Answer

یہ منظر نامہ ستون کے لحاظ سے بٹا ہوا ہے — metrics, logs, traces — اور ساتھ ہی all-in-one managed platforms۔ انتخاب **self-hosted بمقابلہ managed** پر منحصر ہے، جو team کے سائز، budget، اور scale سے متاثر ہے۔

## Pillar کے لحاظ سے Tools

```text
METRICS    Prometheus  → pull-based scraping, time-series DB, PromQL query language
           Grafana     → dashboards on top of Prometheus (and many other sources)

LOGS       ELK         → Elasticsearch + Logstash + Kibana (powerful, heavy to run)
           Loki        → "Prometheus for logs": cheap, indexes labels not full text

TRACES     Jaeger      → distributed tracing, OpenTelemetry-compatible
           Tempo       → trace backend that pairs with Grafana/Loki

ALL-IN-ONE Datadog     → managed metrics + logs + traces + APM in one product
```

## Prometheus + Grafana کیوں عام open-source بنیاد ہے

Prometheus targets سے metrics **pull** کرتا ہے جو وہ scrape کرتا ہے (service `/metrics` کو expose کرتی ہے)، انہیں time-series DB میں محفوظ کرتا ہے، اور **PromQL** سے query کرتا ہے۔ Pull targets کو تلاش کرنا اور health-check کرنا آسان بناتا ہے۔ Grafana visualization کے لیے اوپر بیٹھتا ہے۔ Loki اور Tempo اسی stack کو logs اور traces تک بڑھاتے ہیں، سب کچھ ایک Grafana UI میں queryable ہے۔

```promql
# PromQL: per-route error ratio over 5 minutes
sum by (route) (rate(http_requests_total{status=~"5.."}[5m]))
  / sum by (route) (rate(http_requests_total[5m]))
```

## Self-hosted بمقابلہ managed معاملات

```text
SELF-HOSTED (Prometheus/Grafana/Loki/Tempo)
  ✓ no per-host bill, full control, no data leaves your infra
  ✗ you run, scale, and patch it; storage & HA are your problem

MANAGED (Datadog, Grafana Cloud)
  ✓ no ops burden, integrations out of the box, scales for you
  ✗ costs grow fast with hosts/volume; some vendor lock-in
```

## کیسے منتخب کریں

```text
Small team / tight budget   → self-hosted Prometheus + Grafana (+ Loki)
Fast-moving, ops-light team  → managed (Datadog / Grafana Cloud)
Large scale / strict cost    → self-host the core, but budget for the ops team
```

## یہ اہم کیوں ہے

کوئی universally بہترین tool نہیں ہے — صرف آپ کی constraints کے لیے صحیح fit ہے۔ ایک 5-person startup HA Elasticsearch cluster چلانے کی کوشش میں ڈوب جاتا ہے؛ ایک بڑی enterprise سالانہ چھ اعداد و شمار میں جلا سکتا ہے managed platform پر جسے وہ self-host کر سکتا ہے۔ یہ جاننا کہ ہر tool کیا کرتا ہے اور self-hosted-vs-managed معاملات آپ کو observability کو team کے سائز، budget، اور scale کے مطابق کرنے کی بجائے مشہور جو کچھ ہے اس کو cargo-cult کرنے کی بجائے مماثل کرتے ہیں۔