Koja su česta isklapanja i greške pri korištenju Kafke?

Question

Accepted Answer

Kafka je moćna ali ima **česta isklapanja** — zabune i greške oko particioniranja, redoslijeda, ponašanja potrošača, semantike dostave i operacija. Razumijevanje ovih problema pomaže izbjegavanju problema i ispravnom korištenju Kafke.

## Isklapanja u dizajnu i particioniranju

```text
✗ Too FEW partitions → limits consumer parallelism (can't scale consumption beyond
  partition count); too MANY → overhead, rebalancing pain → plan partition count carefully
✗ Wrong PARTITION KEY → uneven distribution (hot partitions) or wrong ordering scope →
  choose a key for even distribution AND the ordering you need
✗ Expecting GLOBAL ordering → Kafka only orders WITHIN a partition (a common misunderstanding)
✗ Adding partitions changes key→partition mapping → breaks ordering for keys (be careful)
```

## Isklapanja u potrošačima i obradi

```text
✗ Ignoring CONSUMER LAG → consumers falling behind unnoticed → growing delay
✗ Not handling DUPLICATES → at-least-once means duplicates → need idempotent processing
  (a very common mistake — assuming exactly-once without idempotency)
✗ Slow processing blocking the consumer → causes lag/rebalances; long processing → rebalance issues
✗ Frequent REBALANCES → from slow processing/timeouts → consumption pauses (tune, optimize)
✗ Improper offset committing → reprocessing or message loss
```

## Operacijska i isklapanja u korištenju

```text
✗ Using Kafka where a SIMPLE QUEUE suffices → unneeded complexity (over-engineering)
✗ Ignoring DISK/retention → disk fills up (serious failure)
✗ Under-replication / weak durability config (acks=1) → data loss on failures
✗ No monitoring; treating Kafka as simple (it's a complex distributed system)
✗ Not securing Kafka (open access)
→ understand Kafka's model to avoid these common mistakes
```

## Zašto je to važno

Razumijevanje čestih isklapanja u Kafki je vrijedna znanja na višoj razini jer **prepoznavanje i izbjegavanje čestih grešaka pomaže u ispravnom korištenju Kafke**, pa je to praktički važno za stvarno korištenje Kafke.

Kafka je moćna ali ima mnogo suptilnih isklapanja koja uzrokuju prave probleme, a poznavanje ih pomaže izbjegavanju tih grešaka.

Razumijevanje **isklapanja u dizajnu i particioniranju** — premalo particija (ograničavanje paralelizma) ili premalo (overhead), pogrešni ključevi particija (uzrokovanje hotih particija ili pogrešnog redoslijeda), očekivanje **globalnog redoslijeda** (česta zabuna, jer Kafka naređuje samo unutar particije) i problem što dodavanje particija prekida mapiranje ključa na particiju (utječući na redoslijed) — pomaže izbjegavanju particioniranja i grešaka redoslijeda koje su česte i značajne.

Razumijevanje **isklapanja u potrošačima i obradi** — ignoriranje zaostanka potrošača (potrošači zaostaju neprimetno), **ne rukovanje duplikatima** (vrlo česta greška, jer dostava najmanje-jednom znači duplikate koji zahtijevaju idempotentnu obradu — pretpostavljanje točno-jednom bez idempotencije je česta greška), spora obrada uzrokujući zaostanak i prebalansiravanja, česta prebalansiravanja i nepravilno posvećivanje offseta — pomaže izbjegavanju grešaka na strani potrošača koje uzrokuju zaostanak, duplikate i ponovno obrađivanje problema.

Razumijevanje **operacijskih isklapanja i isklapanja u korištenju** — korištenje Kafke gdje jednostavni red čeka dovoljno (over-engineering), ignoriranje diska/retencije (disk ispunjava se), slaba konfiguracija trajnosti (acks=1 rizikuje gubitak podataka), nema nadzora i nije osigurana Kafka — pomaže izbjegavanju operacijskih i suđenja greške.

Znanje ovih isklapanja (pogotovo čestih oko zabune redoslijeda, rukovanja duplikatima, zaostanka potrošača i prekomjerne Kafke) pomaže vam da ispravno koristite Kafku i izbjegavate prave probleme koji zahvataju mnoge korisnike.

Ova svijest odražava praktično iskustvo s Kafkom.

Budući da Kafka ima mnogo suptilnih, čestih isklapanja (zabune oko particioniranja/redoslijeda, rukovanje duplikatima, zaostanak potrošača, over-korištenje, operacijske greške) koja uzrokuju prave probleme, i budući da prepoznavanje i izbjegavanje ih pomaže u ispravnom korištenju Kafke, razumijevanje čestih isklapanja u Kafki je vrijedna znanja na višoj razini — praktički važno za izbjegavanje čestih grešaka (pogotovo oko redoslijeda, duplikata/idempotencije, zaostanka i primjenjivog korištenja) koji zahvataju Kafke korisnike, što odražava praktično iskustvo i pomaže u ispravnom i pouzdanom korištenju Kafke u stvarnim sustavima.