Het bedrijven van Kafka vereist monitoring van belangrijke metrics — vooral consumer lag (hoe ver consumenten achterliggen) — plus broker health, throughput en partition status. Het begrijpen van monitoring en consumer lag is belangrijk voor het betrouwbaar bedrijven van Kafka.
Consumer lag (een belangrijke metric)
CONSUMER LAG → how far BEHIND a consumer is = (latest offset) − (consumer's committed offset):
→ high/growing lag → the consumer can't keep up with the production rate (a problem!)
→ indicates: slow processing, too few consumers, a stuck/failed consumer, or a traffic spike
→ monitor lag → detect when consumers fall behind (a primary Kafka health signal)
