Što su stream-ovi u Node.js-u i kada ih trebate koristiti?

Question

Accepted Answer

**Stream-ovi** obrađuju podatke **inkrementalno, u dijelovima**, umjesto da učitavaju sve u memoriju odjednom. To ih čini neophodnim za velike podatke (velike datoteke, mrežni transfer) gdje bi međuspremanje svega moglo iscrpiti memoriju.

## Problem koji stream-ovi rješavaju

```js
// ❌ loads the ENTIRE file into memory — crashes on a 10GB file
const data = await fs.promises.readFile("huge.csv");
process(data);

// ✅ stream it — constant memory, processes chunk by chunk
fs.createReadStream("huge.csv")
  .pipe(transform)
  .pipe(fs.createWriteStream("out.csv"));
```

Sa stream-ovima, korištenje memorije ostaje nepromijenjeno bez obzira na veličinu datoteke — obrađujete po jedan dio odjednom.

## Četiri vrste stream-ova

```text
Readable  → source you read FROM (fs.createReadStream, http request)
Writable  → destination you write TO (fs.createWriteStream, http response)
Duplex    → both readable & writable (TCP socket)
Transform → modify data as it passes through (zlib gzip, encryption)
```

## pipe — povežite stream-ove

```js
import { createReadStream, createWriteStream } from "fs";
import { createGzip } from "zlib";

// read → compress → write, all streaming, low memory
createReadStream("file.txt")
  .pipe(createGzip())            // Transform: compress on the fly
  .pipe(createWriteStream("file.txt.gz"));
```

`pipe` povezuje čitljiv u pisivi (sa transformacijama između), automatski upravljajući tokom — idiomatski način za komponiranje stream-ova.

## pipeline — pipe sa odgovarajućom obradom grešaka

```js
import { pipeline } from "stream/promises";

await pipeline(
  createReadStream("in.txt"),
  createGzip(),
  createWriteStream("out.gz")
); // ✅ cleans up all streams on error/completion (pipe alone leaks on errors)
```

`pipeline` je poželjniji od ulančanih `.pipe()` jer širi greške i pravilno čisti svaki stream.

## Gdje se stream-ovi pojavljuju

```text
✓ HTTP request/response bodies (req and res ARE streams)
✓ File reading/writing, file uploads/downloads
✓ Compression (zlib), encryption (crypto)
✓ Database cursors, large query results
✓ Real-time data processing, video streaming
```

## Kada ne brinuti

```text
Small data that fits comfortably in memory → readFile/simple buffering is simpler.
Streams add complexity; use them for LARGE or continuous data.
```

## Zašto je to važno

Stream-ovi su svojstvo koje definiše Node za **memorijski učinkovito** upravljanje velikim ili neprekidnim podacima — razlika između aplikacije koja pada na velikom slanju i one koja upravlja bilo kojom veličinom sa ravnom memorijom.

Razumijevanje četiri vrste, `pipe`/`pipeline` komponiranja (i zašto je `pipeline` sigurniji), i da su HTTP zahtjevi/odgovori sami stream-ovi, bitno je za izradu skalabilnih servisa za obradu datoteka, obrada podataka i proksirajuće servise u Node-u.