Kako deluje naročanje sporočil v Kafki?

Question

Accepted Answer

Kafka zagotavlja **naročanje znotraj particije**, vendar **ne čez particije** — ključni koncept. Za naročanje povezanih dogodkov jih usmerite v isto particijo (preko istega ključa). Razumevanje naročanja je pomembno za pravilnost.

## Naročanje po particiji

```text
Kafka guarantees:
  ✓ ORDER WITHIN a partition → events in a partition are strictly ordered (by offset);
    consumers read them in order
  ✗ NO order ACROSS partitions → events in different partitions have no relative order
    guarantee (they're processed in parallel by different consumers)
→ this is a FUNDAMENTAL Kafka property (and a common source of misunderstanding)
```

## Doseganje naročanja za povezane dogodke

```text
To keep RELATED events ordered → send them to the SAME partition:
  → use the SAME KEY for related events (key → hash → same partition):
    e.g. all events for orderId=5 use key=5 → same partition → ordered for that order
  → so per-entity ordering: key by the entity (userId, orderId, accountId)
→ choose the key so events that must be ordered share a partition
```

## Kompromisi in razmisleki

```text
⚠️ Ordering vs PARALLELISM → ordering within a key/partition limits parallelism for that key
  (all of one key's events are processed by one consumer, in order)
⚠️ A few things break ordering: producer retries (without idempotence + max.in.flight=1),
  adding partitions (changes key→partition mapping)
→ if you DON'T need ordering → no key (spread freely for max parallelism)
→ if you NEED ordering → key appropriately; accept the parallelism scope
```

## Zakaj je to pomembno

Razumevanje naročanja sporočil v Kafki je dragoceno, ker je **naročanje temeljni, pogosto napačno razumljeni koncept Kafke**, pomemben za pravilnost, zato je bistveno znanje.

Garantija naročanja Kafke je specifična in ključna za razumevanje.

Razumevanje **naročanja po particiji** — da Kafka zagotavlja naročanje **znotraj particije** (dogodki strogo urejeni po offsetu, branje v vrstnem redu), vendar **ne čez particije** (dogodki v različnih particijah brez relativnega vrstnega reda, obdelani vzporedno) — je temeljno svojstvo Kafke in **pogost vir nesporazuma** (ljudje pogosto napačno predpostavljajo globalno naročanje), zato je pravilno razumevanje bistveno za pravilnost.

Razumevanje, kako **dosegamo naročanje za povezane dogodke** — pošiljanje v isto particijo z uporabo **istega ključa** (tako da sorodalni dogodki, kot so vsi dogodki za specifičen naročilo ali uporabnika, ključani po tej entiteti, gredo v isto particijo in ostanejo urejeni) — je ključna praktična tehnika za doseganje pravilnosti naročanja, ki ga aplikacije potrebujejo (naročanje po entiteti preko ključanja).

Razumevanje **kompromisov in razmisleka** — da naročanje znotraj ključa/particije **omeji paralelizem** za ta ključ (vsi dogodki enega ključa obdelani s strani enega potrošnika v vrstnem redu), da nekaj stvari prekine naročanje (ponovno pošiljanje proizvajalca brez idempotence in max.in.flight=1, dodajanje particij spreminjajočih preslikavo ključa), in da bi morali uporabiti noben ključ, kadar naročanje ni potrebno (za največji paralelizem), vendar primerno ključati, kadar je potrebno (sprejemši obseg paralelizma) — odraža subtilno razumevanje, potrebno za oblikovanje pravilnega naročanja ob uravnovešanju paralelizma.

To znanje o naročanju je pomembno, ker napačno razumevanje (prevzem globalnega naročanja ali ne ključanje dogodkov, ki potrebujejo naročanje) povzroči prave napake v pravilnosti.

Ker je naročanje temeljni, pogosto napačno razumljeni koncept Kafke (samo po particiji, zahteva ključe za naročanje povezanih dogodkov), pomemben za pravilnost, in ker je razumevanje garantije, kako doseči naročanje prek ključev in kompromisov (naročanje v odnosu do paralelizma) bistveno, je razumevanje naročanja sporočil v Kafki dragoceno, bistveno znanje Kafke — temeljni, pogosto napačno razumljeni koncept ključen za pravilnost, kjer je razumevanje naročanja po particiji in usmerjanja na osnovi ključa za povezane dogodke (ter kompromis paralelizma) potrebno za oblikovanje Kafka sistemov, ki pravilno naročajo dogodke, ključni koncept, ki ga mora vsak uporabnik Kafke natančno razumeti.