Katere so Kafkove semantike dostave (vsaj-enkrat, natanko-enkrat)?

Question

Accepted Answer

Kafka podpira različne **jamstva dostave** — **največ-enkrat**, **vsaj-enkrat** in **natanko-enkrat** — ki določajo, ali je mogoče sporočila izgubiti ali podvojiti. Razumevanje teh jamstev in kako jih dosegti je pomembno za gradnjo zanesljivih sistemov.

## Tri semantike dostave

```text
AT-MOST-ONCE → messages may be LOST but never duplicated:
  → commit offset BEFORE processing → if processing fails, the message is skipped (lost)
  → for: when occasional loss is acceptable and duplicates are not (rare)
AT-LEAST-ONCE → messages are never lost but may be DUPLICATED:
  → commit offset AFTER processing → if a crash occurs before commit, the message is
    reprocessed (duplicate) → requires IDEMPOTENT processing
  → the common default; safe (no loss) but handle duplicates
EXACTLY-ONCE → each message is processed exactly once (no loss, no duplicates):
  → the strongest, but hardest; requires Kafka transactions + idempotent producers
```

## Doseganje jamstev

```text
→ AT-LEAST-ONCE → process then commit; make consumers IDEMPOTENT (handle duplicates safely
  via dedup keys, idempotent operations) — practical and common
→ EXACTLY-ONCE → Kafka's transactional API + idempotent producer (enable.idempotence) →
  produce + commit offsets atomically (exactly-once within Kafka, e.g. Kafka Streams)
  ⚠️ exactly-once is complex and has overhead; often AT-LEAST-ONCE + idempotency is simpler
    and sufficient
```

## Praktični nasveti

```text
✓ Most systems use AT-LEAST-ONCE + idempotent processing (simple, reliable)
✓ Use EXACTLY-ONCE when duplicates are truly unacceptable AND idempotency is hard
✓ Producer acks (acks=all) → durability (don't lose on the produce side)
→ understand the trade-offs; design for the guarantee your use case needs
```

## Zakaj je to pomembno

Razumevanje Kafkovih semantik dostave je dragoceno, ker **jamstva dostave določajo zanesljivost** (ali je mogoče sporočila izgubiti ali podvojiti), zato je razumevanje teh jamstev pomembno za gradnjo zanesljivih sistemov.

Izbira semantike dostave neposredno vpliva na pravilnost.

Razumevanje **treh semantik dostave** — **največ-enkrat** (sporočila je mogoče izgubiti, vendar ne podvojiti, z predanim offsetom pred obdelavo — kadar je občasna izguba sprejemljiva), **vsaj-enkrat** (sporočila nikoli niso izgubljena, vendar so morda podvojena, z predanim offsetom po obdelavi, kar zahteva idempotentno obdelavo — pogosta, varna privzeta možnost) in **natanko-enkrat** (vsako sporočilo obdelano natanko enkrat, najmočnejša, vendar najtežja, kar zahteva transakcije in idempotentne proizvajalce) — je bistvenega pomena za razumevanje kompromisov zanesljivosti.

Razumevanje **kako dosegti jamstva** — vsaj-enkrat z obdelavo in predajo ter narediti potrošnike **idempotentne** (obravnavanje podvojenih sporočil prek ključev za deduplikacijo in idempotentnih operacij — praktično in pogosto) in natanko-enkrat prek Kafkove API za transakcije in idempotentnega proizvajalca (proizvodnja in predaja offsetov atomsko), z pomembnim opozorilom, da je natanko-enkrat kompleksno z režijo, medtem ko je **vsaj-enkrat plus idempotentnost pogosto enostavnejša in zadostna** — odraža praktični pristop.

Razumevanje **praktičnih nasvetov** — da večina sistemov uporablja vsaj-enkrat plus idempotentno obdelavo (enostavno in zanesljivo), z uporabo natanko-enkrat le, kadar so podvajanja resnično nesprejemljiva in je idempotentnost težka, ter z uporabo proizvajalčevih potrditvenih sporočil za trajnost — odraža zdrav sodben.

Ključni vpogled je, da semantike dostave vključujejo kompromise (izguba vs podvajanja vs kompleksnost), in pogosta, praktična izbira je vsaj-enkrat z idempotentnostjo, kar se povezuje s širšo pomembnostjo idempotentnosti v porazdeljenih sistemih.

Ker jamstva dostave določajo, ali je mogoče sporočila izgubiti ali podvojiti (neposredno vplivajo na zanesljivost) in razumevanje semantik, kako jih dosegti (posebej vsaj-enkrat z idempotentnostjo kot praktični privzeti standard) ter kompromisov je pomembno za gradnjo zanesljivih sistemov, je razumevanje Kafkovih semantik dostave dragoceno, praktično-pomembno Kafkovo znanje — osrednje za zanesljivost, pomembno za oblikovanje sistemov s pravimi jamstvi (pogosto vsaj-enkrat z idempotentnostjo) ter odraža razumevanje, potrebno za gradnjo zanesljivih sistemov na osnovi Kafke.