Koji su temeljni koncepti Kafke (topics, partitions, brokers)?

Question

IT Interview Practice · Accepted Answer

Kafkini temeljni koncepti uključuju **topics** (kategorije događaja), **partitions** (jedinice paralelizma unutar topica), **brokers** (servere), **producers** (pisanja) i **consumers** (čitanja). Razumijevanje ovih koncepata je temeljno za rad s Kafkom.

## Temeljni koncepti

```text
TOPIC → a named category/stream of events (like a "channel" — e.g. "orders", "clicks")
  → producers write to topics; consumers read from them
PARTITION → a topic is split into PARTITIONS (ordered, append-only logs):
  → the unit of PARALLELISM and scaling; events distributed across partitions
  → order is guaranteed WITHIN a partition (not across partitions)
BROKER → a Kafka SERVER (stores data, serves clients); a CLUSTER = multiple brokers
PRODUCER → writes (publishes) events to topics
CONSUMER → reads (subscribes to) events from topics
```

## Partitions i offsets

```text
→ each partition is an ordered, immutable sequence of events
→ each event has an OFFSET (its position in the partition)
→ consumers track their offset (where they've read to) → can resume, replay
→ events stay in the partition (retained); consumers read at their own pace
→ a partition KEY determines which partition an event goes to (same key → same partition
  → ordering for that key)
```

## Kako se sve povezuje

```text
Producer → writes to a TOPIC (→ a PARTITION based on key) → stored on a BROKER (replicated)
  → Consumer reads from the partition (tracking its offset)
→ topics organize events; partitions enable parallelism/scale; brokers store/serve;
  offsets track position
```

## Zašto je važno

Razumijevanje Kafkinih temeljnih koncepata je ključno jer su **topics, partitions, brokers, producers i consumers građevni blokovi Kafke**, pa je razumijevanje njih bitno za bilo koji rad s Kafkom.

Ti koncepti čine temelj kako Kafka funkcionira.

Razumijevanje **topicsa** (nazvanih kategorija/tokova događaja u koje producers pišu a consumers čitaju) je osnovni organizacijski koncept.

Razumijevanje **partitionsa** je posebno važno: topicsi se dijele na partitione (uređeni, append-only logovi) koji su **jedinica paralelizma i skaliranja**, s ključnim svojstvom da je **redoslijed zajamčen unutar particije ali ne između particija** — ključni koncept koji utječe na kako se Kafka skalira i uređuje događaje.

Razumijevanje **brokera** (Kafka servera, koji čine cluster), **producersa** (pisanja događaja) i **consumersa** (čitanja događaja) dovršava osnovnu arhitekturu.

Razumijevanje **particija i offsetsa** — svaka particija je uređeni nepromjenjiv niz gdje događaji imaju **offsetse** (pozicije), consumeri prate svoj offset kako bi se nastavili i ponovo poigrali, eventi se čuvaju kako bi consumeri čitali vlastitom brzinom, a **partition key** određuje u koju particiju ide događaj (isti ključ → ista particija → redoslijed za taj ključ) — je bitno za razumijevanje Kafkinog data modela i garantiranja redoslijeda.

Razumijevanje **kako se sve povezuje** (producersi pišu topicse/particije pohranjene na repliciranim brokerima, consumeri čitaju dok prate offsetse) daje potpunu sliku.

Ti koncepti su vokabular i mehanika Kafke na kojoj se sve ostalo gradi.

Budući da su topics, partitions, brokers, producers, consumers i offsetsi temeljni građevni blokovi Kafke (pri čemu su particije i redoslijed posebno važni koncepti), i budući da je razumijevanje njih bitno za bilo koji rad s Kafkom, razumijevanje Kafkinih temeljnih koncepata je bitno, temeljno znanje — građevni blokovi Kafke potrebni za rad s njom, centralni za razumijevanje kako Kafka organizira, skalira, uređuje i pohranjuje događaje, i temelj za sve Kafkine teme.

Temeljni koncepti

Partitions i offsets

Kako se sve povezuje

Zašto je važno

Povezana pitanja