Kafka'da mesaj sıralaması nasıl çalışır?

Question

Accepted Answer

Kafka, **bir partition içindeki sıralamayı** garanti eder ancak **partitionlar arasında değil** — çok önemli bir konsept. İlgili olaylar için sıralama elde etmek için, onları aynı partition'a yönlendirirsiniz (aynı anahtar aracılığıyla). Sıralamayı anlamak doğruluk için önemlidir.

## Partition başına sıralama

```text
Kafka guarantees:
  ✓ ORDER WITHIN a partition → events in a partition are strictly ordered (by offset);
    consumers read them in order
  ✗ NO order ACROSS partitions → events in different partitions have no relative order
    guarantee (they're processed in parallel by different consumers)
→ this is a FUNDAMENTAL Kafka property (and a common source of misunderstanding)
```

## İlgili olaylar için sıralama elde etme

```text
To keep RELATED events ordered → send them to the SAME partition:
  → use the SAME KEY for related events (key → hash → same partition):
    e.g. all events for orderId=5 use key=5 → same partition → ordered for that order
  → so per-entity ordering: key by the entity (userId, orderId, accountId)
→ choose the key so events that must be ordered share a partition
```

## Ödünleşimler ve hususlar

```text
⚠️ Ordering vs PARALLELISM → ordering within a key/partition limits parallelism for that key
  (all of one key's events are processed by one consumer, in order)
⚠️ A few things break ordering: producer retries (without idempotence + max.in.flight=1),
  adding partitions (changes key→partition mapping)
→ if you DON'T need ordering → no key (spread freely for max parallelism)
→ if you NEED ordering → key appropriately; accept the parallelism scope
```

## Neden önemli

Kafka'da mesaj sıralamasını anlamak değerlidir çünkü **sıralama, temel ve yaygın olarak yanlış anlaşılan bir Kafka konseptidir** ve doğruluk için önemlidir, bu nedenle temel bilgidir.

Kafka'nın sıralama garantisi spesifik ve anlaması çok önemlidir.

**Partition başına sıralama**yi anlamak — Kafka'nın **bir partition içinde** sıralamayı garanti ettiği (olaylar offset'e göre kesinlikle sıralı, sırayla okunur) ancak **partitionlar arasında değil** (farklı partitionlardaki olayların göreceli sırası olmaz, paralel olarak işlenir) — temel bir Kafka özelliğidir ve **yaygın yanlış anlaşılmanın kaynağıdır** (insanlar sıklıkla yanlışlıkla global sıralamayı varsayarlar), bu nedenle doğru şekilde anlamak doğruluk için gereklidir.

**İlgili olaylar için sıralama elde etmeyi** anlamak — onları **aynı anahtar**ı kullanarak aynı partition'a göndermek (böylece belirli bir siparişin tüm olayları veya bir kullanıcının tüm olayları, o varlık tarafından anahtarlandırılırsa aynı partition'a gider ve sıralı kalır) — uygulamaların ihtiyaç duyduğu sıralama doğruluğunu başarmak için pratik tekniktir (anahtarlama yoluyla varlık başına sıralama).

**Ödünleşimler ve hususları** anlamak — bir anahtar/partition içindeki sıramanın **o anahtar için paralelliği sınırladığı** (bir anahtarın tüm olayları sırayla bir tüketici tarafından işlenir), birkaç şeyin sıralamayı bozduğu (idempotans olmayan üretici yeniden denemeleri ve max.in.flight=1, partition ekleme anahtar eşlemesini değiştirme) ve sıralama gerekli olmadığında anahtar kullanmadan (maksimum paralellik için) ancak gerekli olduğunda uygun şekilde anahtarlandırılması gerektiği (paralellik kapsamını kabul etmek) — doğru sıralama için tasarlarken paralelliğin dengelenmesi için gerekli olan incelikli anlayışı yansıtır.

Bu sıralama bilgisi önemlidir çünkü yanlış anlaşılması (global sıralamayı varsayma veya sıralamaya ihtiyacı olan olayları anahtarlandırmama) gerçek doğruluk hatalarına neden olur.

Sıralama, temel ve yaygın olarak yanlış anlaşılan bir Kafka konsepti olduğundan (yalnızca partition başına, ilgili olaylar için anahtarlar gerekir) ve doğruluk için önemli olduğundan, ve garantiyi, anahtarlar aracılığıyla sıralama elde etmeyi ve ödünleşimleri (sıralama vs paralellik) anlamak gerekli olduğundan, Kafka'da mesaj sıralamasını anlamak değerli, temel Kafka bilgisidir — temel ve sıklıkla yanlış anlaşılan doğruluk için çok önemli bir konsept, burada partition başına sıralamayı ve ilgili olaylar için anahtar tabanlı yönlendirmeyi (ve paralellik ödünleşimini) anlamak Kafka sistemlerini olayları doğru şekilde sıralamak için tasarlamak için gereklidir, her Kafka kullanıcısının doğru şekilde anlaması gereken bir temel konsept.