Kas yra Apache Kafka ir kam jis naudojamas?

Question

Accepted Answer

**Apache Kafka** yra paskirstyta **renginių srauto platforma** — aukštos pralaidumo, patikima sistema renginių (įrašų) srautams publikuoti, saugoti ir apdoroti. Jis naudojamas žinučių perdavimui, realaus laiko duomenų gazolinams, su renginiais valdomoms architektūroms ir srauto apdorojimui dideliu mastu.

## Kas yra Kafka

```text
Kafka = a distributed, durable, high-throughput EVENT STREAMING platform:
  → PUBLISH events (producers write) and SUBSCRIBE to them (consumers read)
  → STORE streams of events durably (a distributed, replicated commit LOG)
  → PROCESS streams in real time
→ think of it as a durable, scalable, append-only LOG of events that many systems can
  write to and read from
```

## Kam naudojama Kafka

```text
✓ MESSAGING / event streaming → decoupled communication between systems (pub/sub at scale)
✓ DATA PIPELINES → move/stream data between systems reliably (ingestion, ETL)
✓ EVENT-DRIVEN architecture → services react to events; event sourcing
✓ REAL-TIME processing → analytics, monitoring, stream processing (Kafka Streams)
✓ LOG aggregation, metrics, activity tracking, change data capture (CDC)
→ used by huge companies for high-volume, real-time data
```

## Pagrindinės charakteristikos

```text
✓ HIGH THROUGHPUT → handles millions of events/sec (very scalable)
✓ DURABLE → events persisted to disk, replicated (not lost)
✓ DISTRIBUTED → scales horizontally across a cluster of brokers
✓ Events RETAINED → consumers read at their own pace; events kept (replay possible)
✓ DECOUPLED → producers and consumers are independent
```

## Kodėl tai svarbu

Supratimas, kas yra Kafka ir kam jis naudojamas, yra vertingas, esmingas žinias, nes Kafka yra **dominuojanti platforma renginių srautams ir didelės apimties duomenims** šiuolaikinėse architektūrose, plačiai naudojama pramonėje.

Kafka yra paskirstyta renginių srauto platforma — iš esmės **patikimas, масштабируемас, tik pridėčiai skirtas renginių žurnalas**, kuriame gamintojaipasiųlia duomenis ir vartotojai juos skaito, sujungdama žinučių sistema, patikimą saugojimą ir srauto apdorojimą.

Supratimas šios pagrindinės prigimties (prenumerata/publikavimas į renginių srautus, patikimai saugomas paskirstytame replikuotame žurnale, realaus laiko apdorojimas) yra pagrindas.

Supratimas, **kam naudojama Kafka** — žinučių perdavimas ir renginių srautai (atsiskyrę pub/sub dideliu mastu), duomenų gazolinai (patikimas duomenų perkėlimas tarp sistemų), su renginiais valdomos architektūros ir renginių šaltinis, realaus laiko apdorojimas ir analizė, žurnalo agregavimas ir pasikeitusių duomenų fiksavimas — paaiškina jos platų taikomumą didelės apimties, realaus laiko duomenų scenarijuose.

Supratimas **pagrindinių charakteristikų** — aukštas pralaidumas (milijonai renginių per sekundę), patikimumas (renginiai išsaugoti ir replikuoti, neprarasti), paskirstyta horizontali skalė, renginių laikymas (vartotojai skaito savo tempu su galimybe grįžti — išskirtinis bruožas), ir atsiskyrimas — paaiškina, kodėl Kafka pasirenkama reikalingiems duomenų scenarijuose.

Kafka plačiai naudojama didelių įmonių ir vis dažniau naudojama šiuolaikinėse duomenų architektūrose srautams, gazolinams ir su renginiais valdomoms sistemoms.

Kadangi Kafka yra dominuojanti, plačiai naudojama renginių srautų ir didelės apimties duomenų platforma (žinučių perdavimas, gazolinai, su renginiais valdomos architektūros, realaus laiko apdorojimas) ir supratimas apie jos prigimtį (patikimas, mastuojamas renginių žurnalas), panaudojimą ir charakteristikas yra esmingas šiuolaikinėms duomenų ir su renginiais valdomoms architektūroms, supratimas, kas yra Kafka ir kam jis naudojamas, yra vertingas, plačiai taikytinas žinias — esmingas supratimas apie pagrindinę renginių srauto platformą, vis svarbesnė šiuolaikinėse duomenų architektūrose, ir rėmelis konkretesniems Kafka temoms, vertingas bet kam dirbantis su srautais arba su renginiais valdomomis sistemomis.