Koja je ukupna arhitektura Apache Kafke?

Question

Accepted Answer

Arhitektura Kafke se sastoji od **klastera brokera** (poslužitelja) koji pohranjavaju particionirane, replicirane teme, s **producentima** koji pišu i **konzumentima** koji čitaju, koordinirane upravom metapodataka (povijesno ZooKeeper, sada KRaft). Razumijevanje arhitekture pojašnjava kako Kafka funkcionira kao distribuirani sustav.

## Komponente

```text
BROKERS → Kafka SERVERS forming a CLUSTER:
  → store topic partitions (the data); serve producers and consumers
  → a cluster of multiple brokers → distributes data and load; scales horizontally
TOPICS / PARTITIONS → topics split into partitions, distributed across brokers
PRODUCERS → write events to topics (to partition leaders)
CONSUMERS (in groups) → read events from partitions
COORDINATION → metadata, cluster state, leader election:
  → historically ZOOKEEPER; now KRAFT (Kafka's own built-in consensus, removing ZooKeeper)
```

## Replikacija za trajnost i dostupnost

```text
Partitions are REPLICATED across brokers for fault tolerance:
  → each partition has a LEADER (handles reads/writes) + FOLLOWERS (replicas):
    - producers/consumers interact with the leader
    - followers replicate the leader's data → if the leader fails, a follower takes over
  → REPLICATION FACTOR → how many copies (e.g. 3) → survive broker failures without data loss
  → IN-SYNC REPLICAS (ISR) → replicas caught up with the leader (for durability guarantees)
```

## Kako funkcionira zajedno

```text
Producer → writes to a partition's LEADER on a broker → replicated to followers →
  Consumer (in a group) reads from partitions → cluster coordinated by KRaft/ZooKeeper
→ a distributed, replicated, scalable system: brokers store/serve, replication gives
  durability/HA, coordination manages the cluster
```

## Zašto je važno

Razumijevanje ukupne arhitekture Kafke je vrijedno jer **pojašnjava kako Kafka funkcionira kao distribuirani sustav**, pa je to temeljno znanje za rad s Kafkom.

Kafka je distribuirani sustav, a razumijevanje njene arhitekture objašnjava kako postiže svoju skalabilnost, trajnost i dostupnost.

Razumijevanje **komponenti** — **brokera** (Kafkinih poslužitelja koji formiraju klaster i pohranjavaju particije i služe klijentima, distribuirajući podatke i opterećenje), tema/particija distribuiranih preko brokera, producenata koji pišu i konzumenata koji čitaju, i **koordinacije** (upravljanja metapodacima i klasterom, povijesno putem ZooKeepera, sada sve više putem **KRafta** — Kafkinog vlastitog ugrađenog konsenzusa koji uklanja ovisnost o ZooKeeperu) — pojašnjava dijelove sustava.

Razumijevanje **replikacije za trajnost i dostupnost** je posebno važno: particije se **replikuju preko brokera** (svaka s **liderom** koji rukuje čitanjem/pisanjem i **sljedbenicima** koji je replikuju), pa ako lider padne, sljedbenk preuzima (dostupnost), s **faktorom replikacije** koji određuje koliko kopija preživljava kvarove bez gubitka podataka (trajnost), i **sinkroniziranim replikama** koji osiguravaju jamstva trajnosti.

Ovaj mehanizam replikacije je kako Kafka postiže toleranciju greške i trajnost — ključne za njenu pouzdanost.

Razumijevanje **kako funkcionira zajedno** (producenti pišu liderima particija, replikuju se sljedbenicima, konzumenti čitaju, sve koordinirano) pruža cjelovitu sliku Kafke kao distribuiranog, replikovanog, skalabilnog sustava.

Ovo arhitektonsko razumijevanje pojašnjava kako Kafka isporučuje svoja ključna svojstva (skalabilnost kroz distribuirane particionirane brokere, trajnost i dostupnost kroz replikaciju).

Budući da je Kafka distribuirani sustav i razumijevanje njene arhitekture (brokeri, replikacija s liderima/sljedbenicima, koordinacija) pojašnjava kako postiže skalabilnost, trajnost i dostupnost, i budući da je to temeljno za rad s Kafkom, razumijevanje ukupne arhitekture Kafke je vrijedno, temeljno znanje — pojašnjava kako Kafka funkcionira kao distribuirani, replikovani sustav (brokeri, replikacija za toleranciju greške, koordinacija), objašnjava kako isporučuje svoja ključna svojstva i temeljno je za razumijevanje i rad Kafke.