Apakah itu message queue dan mengapa menggunakannya?

Question

Accepted Answer

**Message queue** membolehkan **komunikasi tak segerak** antara komponen — pengeluar menghantar mesej ke baris gilir, dan pengguna memprosesnya kemudian. Ia memisahkan komponen, meningkatkan daya tahan, menangani lonjakan beban, dan membolehkan pemprosesan latar belakang.

## Apa yang dilakukan oleh message queue

```text
A MESSAGE QUEUE sits between producers and consumers:
  Producer → [QUEUE] → Consumer(s) process messages (asynchronously, at their own pace)
  → the producer doesn't wait for processing (sends and moves on)
  → messages are stored until processed (buffered)
→ ASYNCHRONOUS, decoupled communication.
```

## Mengapa menggunakan message queue

```text
✓ DECOUPLING → producers and consumers are independent (don't need to know each other or
  be available at the same time) → flexible, resilient architecture
✓ LOAD LEVELING → the queue BUFFERS spikes → consumers process steadily (handle bursts
  without overwhelming the system)
✓ ASYNC / background processing → offload slow work (emails, image processing, reports)
  from the request path → fast responses
✓ RELIABILITY → messages persist until processed; retries on failure; not lost if a
  consumer is down
✓ SCALABILITY → add more consumers to process faster (parallel processing)
```

## Corak dan alat lazim

```text
→ TASK/JOB queues → background jobs (a worker processes them)
→ PUB/SUB → broadcast events to multiple subscribers
→ EVENT-DRIVEN architecture → services react to events asynchronously
Tools: RabbitMQ, AWS SQS, Kafka (streaming), Redis, etc.
⚠️ considerations: ordering, exactly-once vs at-least-once delivery, dead-letter queues
```

## Mengapa ia penting

Memahami message queue adalah berharga kerana ia merupakan **komponen asas untuk membina sistem yang boleh diskala, berdaya tahan, dan terpisah (decoupled)**, jadi ia merupakan pengetahuan reka bentuk sistem yang penting.

Message queue membolehkan **komunikasi tak segerak** (pengeluar menghantar mesej yang diproses oleh pengguna kemudian, dengan baris gilir menampan antaranya), menangani beberapa keperluan penting. **Pemisahan** — pengeluar dan pengguna yang bebas (tidak perlu mengenali antara satu sama lain atau tersedia secara serentak) — membolehkan seni bina yang fleksibel dan berdaya tahan di mana komponen boleh berkembang dan gagal secara bebas. **Peratan beban (load leveling)** — baris gilir menampan lonjakan supaya pengguna memproses secara mantap — membolehkan sistem menangani ledakan tanpa dibebani secara berlebihan, satu manfaat daya tahan yang utama. **Pemprosesan async/latar belakang** — memunggah kerja yang perlahan (e-mel, pemprosesan imej, laporan) dari laluan permintaan — memastikan respons kekal pantas. **Kebolehpercayaan** — mesej kekal sehingga diproses, dengan retry, supaya kerja tidak hilang jika pengguna terganggu — meningkatkan keteguhan.

Dan **skalabiliti** — menambah pengguna untuk pemprosesan selari — menangani beban yang berkembang.

Memahami manfaat ini menjelaskan mengapa message queue adalah teras kepada reka bentuk sistem moden.

Memahami **corak lazim** (baris gilir tugas/kerja untuk kerja latar belakang, pub/sub untuk penyiaran, seni bina dipacu peristiwa) dan alat (RabbitMQ, SQS, Kafka, Redis), ditambah pertimbangan (penyusunan, jaminan penghantaran, dead-letter queue), menyediakan asas praktikal.

Message queue ialah blok binaan berulang yang penting dalam sistem yang boleh diskala.

Memandangkan message queue membolehkan pemisahan, peratan beban, pemprosesan async, kebolehpercayaan, dan skalabiliti yang diperlukan oleh sistem yang boleh diskala dan berdaya tahan, dan memandangkan ia merupakan blok binaan reka bentuk sistem yang asas, dan memandangkan memahami apa yang dilakukannya dan mengapa menggunakannya adalah penting, memahami message queue adalah pengetahuan reka bentuk sistem yang berharga dan berkaitan secara praktikal — komponen asas untuk membina sistem yang terpisah, berdaya tahan, dan boleh diskala melalui komunikasi tak segerak, teras kepada seni bina dipacu peristiwa dan boleh diskala, serta blok binaan penting yang berulang sepanjang reka bentuk sistem.