Ce este testarea prin mutație?

Question

Accepted Answer

**Testarea prin mutație** evaluează **calitatea unei suite de teste** prin introducerea deliberată a unor mici erori ("mutanți") în cod și verificarea dacă testele **le detectează**. Ea măsoară cât de bune sunt testele în a detecta defecte — mergând dincolo de acoperire, care măsoară doar execuția.

## Cum funcționează testarea prin mutație

```text
1. A tool makes small changes (MUTATIONS) to the code, e.g.:
   → change + to -, > to >=, true to false, remove a statement, change a constant
   → each mutation = a deliberate "bug" (a MUTANT version of the code)
2. Run the TEST SUITE against each mutant:
   → tests FAIL → the mutant is "KILLED" (good — tests caught the bug) ✓
   → tests PASS → the mutant "SURVIVED" (bad — tests DIDN'T catch the bug) ✗
3. MUTATION SCORE = % of mutants killed → measures how good the tests are at catching bugs
```

## De ce este mai bună decât acoperirea

```text
COVERAGE → measures if code was EXECUTED (not if behavior was verified) → can be high with
  weak tests (no real assertions)
MUTATION TESTING → measures if tests actually DETECT bugs (changes in behavior):
  → a surviving mutant reveals a GAP — tests execute that code but don't verify it well
    (weak/missing assertions, untested behavior)
→ A much stronger signal of TEST QUALITY than coverage.
```

## Considerații

```text
✓ Reveals weak tests (high coverage but surviving mutants = false confidence)
⚠️ COMPUTATIONALLY EXPENSIVE (runs the suite many times — once per mutant) → slow
⚠️ "Equivalent mutants" (mutations that don't change behavior) → false survivors to ignore
→ Tools: Stryker (JS), PIT (Java), mutmut (Python). Use on critical code; run periodically.
```

## De ce contează

Înțelegerea testării prin mutație este o cunoaștere valoroasă la nivel senior, deoarece oferă o **măsură mult mai puternică a calității testelor decât acoperirea**, rezolvând punctul slab al acoperirii, deci este utilă pentru evaluarea și îmbunătățirea suitelor de teste.

Insight-ul fundamental este că **acoperirea măsoară execuția, nu verificarea** — codul poate fi "acoperit" (executat) de teste care nu verifică de fapt comportamentul acestuia (asertiuni slabe sau lipsă), oferind o încredere falsă. **Testarea prin mutație** rezolvă aceasta măsurând dacă testele detectează efectiv erori: introduce mici erori deliberate (mutanți) în cod și verifică dacă testele le detectează (un mutant "ucis" de testele eșuate este bun; un mutant "supraviețuitor" înseamnă că testele nu au detectat acea eroare).

**Scorul de mutație** (procentajul de mutanți uciși) este un semnal mult mai puternic al calității testelor decât acoperirea, deoarece relevă dacă testele verifică cu adevărat comportamentul — un **mutant supraviețuitor expune un decalaj real** (testele execută codul dar nu-l verific bine, de exemplu asertiuni slabe sau comportament netestabil) pe care acoperirea l-ar rata.

Înțelegerea acesteia — că testarea prin mutație relevă teste slabe ascunse în spatele acoperirii ridicate — este valoarea cheie, rezolvând limitarea că o acoperire ridicată nu garantează teste bune.

Înțelegerea **considerațiilor** — că este **computațional scumpă** (rularea suitei o dată per mutant, ceea ce o face lentă), că "mutanții echivalenți" (mutații care nu schimbă comportamentul) sunt supraviețuitori falși de ignorat, și că instrumente există (Stryker, PIT, mutmut) — reflectă conștientizarea practică a momentului și modului de utilizare (pe cod critic, periodic, mai degrabă decât constant).

Deoarece calitatea testelor contează cu adevărat (acoperirea singură poate oferi o încredere falsă) și testarea prin mutație oferă o măsură mult mai puternică prin verificarea dacă testele detectează efectiv erori, și deoarece înțelegerea ei, avantajul ei față de acoperire și considerațiile sale practice este utilă pentru evaluarea și îmbunătățirea cu adevărat a suitelor de teste, înțelegerea testării prin mutație este o cunoaștere valoroasă la nivel senior — o tehnică sofisticată pentru măsurarea calității reale a testelor, rezolvând punctul slab al acoperirii și reflectând înțelegerea mai profundă a eficacității testelor așteptate pentru roluri senior preocupate de calitatea de testare genuină, nu doar de numere de acoperire.