Što su nestabilni testovi i kako se s njima nositi?

Question

Accepted Answer

**Nestabilni testovi** su testovi koji **prolaze ili padaju neusklađeno** bez promjena koda — ponekad prolaze, ponekad padaju na istom kodu. To je ozbiljna problema jer podriva povjerenje u test skup. Razumijevanje njihovih uzroka i rješenja je važno.

## Što su nestabilni testovi i zašto su štetni

```text
A FLAKY test gives INCONSISTENT results (pass sometimes, fail other times) on the SAME code:
  → harmful: ERODES TRUST — people start ignoring failures ("oh, it's just flaky") →
    real failures get missed too
  → waste time on false alarms / re-runs; break CI; reduce confidence in the whole suite
→ Flaky tests are worse than no test if they make people distrust all tests.
```

## Česti uzroci

```text
✗ TIMING / async → race conditions; not waiting properly for async operations (a top cause
  in UI/E2E tests); arbitrary sleeps
✗ ORDER DEPENDENCE → tests depending on each other / shared mutable state
✗ EXTERNAL dependencies → real network/services (network blips, rate limits, downtime)
✗ NON-DETERMINISM → time/dates, randomness, timezone, locale
✗ Test ENVIRONMENT → leftover state, uncleaned data, concurrency/parallelism issues
```

## Rješavanje i upravljanje nestabilnim testovima

```text
✓ Fix the ROOT CAUSE: wait for conditions (not sleeps); make tests INDEPENDENT and clean
  up state; MOCK external dependencies; control time/randomness (inject them)
✓ Ensure proper isolation (no shared state, no order dependence)
✓ Don't just RETRY blindly (it hides the problem) — investigate and fix
✓ QUARANTINE persistently flaky tests (isolate so they don't block) WHILE fixing them
✓ Treat flakiness seriously — track and address it (it degrades the whole suite)
```

## Zašto je to važno

Razumijevanje nestabilnih testova i kako se s njima nositi je važno jer su **nestabilni testovi ozbiljna, česta problema koja podriva vrijednost cijelog test skupa**, pa je to vrijednovito praktično znanje.

Nestabilni test (koji prolaze ili padaju neusklađeno na istom kodu) je posebno štetan jer **podriva povjerenje**: kada testovi padaju nepredvidivo, ljudi počinju ignorirati kvarove ("samo je nestabilan"), što znači **da se i pravi kvari propuštaju** — pa nestabilnost smanjuje povjerenje u cijeli skup, što ga potencijalno čini gorijem od beskorisnog.

Razumijevanje ove štete motivira ozbiljno shvaćanje nestabilnosti.

Razumijevanje **čestih uzroka** — **timing/async problema** (race conditions, nepravilno čekanje na async operacije, proizvoljna čekanja — čest uzrok posebno u UI/E2E testovima), **ovisnosti o redoslijedu** (testovi koji ovise jedni o drugima ili dijeljenoj stanju), **eksterne ovisnosti** (prava mrežna/servisna greške sa svojim prekidima i zastojima), **nedeterminizam** (vrijeme, slučajnost, vremenska zona, lokalizacija) i **problemi okruženja** (preostalo stanje, konkurentnost) — je potreban za dijagnostiku nestabilnosti.

Razumijevanje kako **rješavati i upravljati** njima — ispravljanje root uzroka (čekanje na uvjete umjesto čekanja, činjenje testova neovisnim i čistim, mockiranje eksternih ovisnosti, kontroliranje vremena i slučajnosti), osiguravanje izolacije, **nepovratna pokušavanja** (koja skrivaju probleme), izolacija perzistentno nestabilnih testova dok se ispravlja, te tretiranje nestabilnosti kao ozbiljnog problema koji se treba pratiti i riješiti — odražava pravi pristup.

Budući da su nestabilni testovi čest, ozbiljan problem koji podriva povjerenje u i vrijednost test skupa (stvaran problem u mnogim stvarnim projektima), i budući da je razumijevanje njihovih uzroka i pravilnog rukovanja (ispravljanje root uzroka, izolacija, nije samo pokušavanje) potrebno za održavanje pouzdanog test skupa, razumijevanje nestabilnih testova je vrijednovito, praktički važno znanje — koje se bavi značajnim stvarnim problemom testiranja, važno za održavanje pouzdanog i pouzdanog test skupa, te odražava praktičnu zrelost da se rukuje jednim od testiranja najfrustrirajućih i najštetnijih problema.