Cad é tástáil shóchainte (mutation testing)?

Question

Accepted Answer

Déanann **tástáil shóchainte (mutation testing)** measúnú ar **cháilíocht sraithe tástála** trí fhabhtanna beaga ("sócháin") a thabhairt isteach sa chód d'aon ghnó agus a sheiceáil an n-aimsíonn na tástálacha iad (**catch them**). Tomhaiseann sí cé chomh maith atá na tástálacha i ndáiríre ag brath lochtanna — ag dul thar chumhdach (coverage), nach dtomhaiseann ach forghníomhú.

## Conas a oibríonn tástáil shóchainte

```text
1. A tool makes small changes (MUTATIONS) to the code, e.g.:
   → change + to -, > to >=, true to false, remove a statement, change a constant
   → each mutation = a deliberate "bug" (a MUTANT version of the code)
2. Run the TEST SUITE against each mutant:
   → tests FAIL → the mutant is "KILLED" (good — tests caught the bug) ✓
   → tests PASS → the mutant "SURVIVED" (bad — tests DIDN'T catch the bug) ✗
3. MUTATION SCORE = % of mutants killed → measures how good the tests are at catching bugs
```

## Cén fáth a bhfuil sí níos fearr ná cumhdach

```text
COVERAGE → measures if code was EXECUTED (not if behavior was verified) → can be high with
  weak tests (no real assertions)
MUTATION TESTING → measures if tests actually DETECT bugs (changes in behavior):
  → a surviving mutant reveals a GAP — tests execute that code but don't verify it well
    (weak/missing assertions, untested behavior)
→ A much stronger signal of TEST QUALITY than coverage.
```

## Nithe le breithniú

```text
✓ Reveals weak tests (high coverage but surviving mutants = false confidence)
⚠️ COMPUTATIONALLY EXPENSIVE (runs the suite many times — once per mutant) → slow
⚠️ "Equivalent mutants" (mutations that don't change behavior) → false survivors to ignore
→ Tools: Stryker (JS), PIT (Java), mutmut (Python). Use on critical code; run periodically.
```

## Cén fáth a bhfuil sé tábhachtach

Is eolas luachmhar ar leibhéal sinsearach é tuiscint ar thástáil shóchainte mar soláthraíonn sí **tomhas i bhfad níos láidre ar cháilíocht na dtástálacha ná cumhdach**, ag dul i ngleic le príomhlaige an chumhdaigh, mar sin tá sé úsáideach chun sraitheanna tástála a mheas agus a fheabhsú.

Is é an léargas bunúsach ná go **dtomhaiseann cumhdach forghníomhú, ní fíorú** — is féidir cód a bheith "cumhdaithe" (forghníomhaithe) ag tástálacha nach bhfíoraíonn a iompar i ndáiríre (dearbhuithe laga nó ar iarraidh), rud a thugann muinín bhréagach. Téann **tástáil shóchainte** i ngleic leis seo trí thomhas an n-aimsíonn na tástálacha fabhtanna i ndáiríre: tugann sí fabhtanna beaga d'aon ghnó (sócháin) isteach sa chód agus seiceálann sí an n-aimsíonn na tástálacha iad (tá sóchán a "maraítear" trí thástálacha a theipeann go maith; ciallaíonn sóchán a "mhaireann" nár aimsigh na tástálacha an fabht sin).

Is comhartha i bhfad níos láidre ar cháilíocht na dtástálacha é an **scór sóchainte** (céatadán na sócháin a maraíodh) ná cumhdach mar nochtann sé an bhfíoraíonn na tástálacha an t-iompar i ndáiríre — nochtann **sóchán marthanach fíorbhearna** (forghníomhaíonn na tástálacha an cód ach ní fhíoraíonn siad go maith é, m.sh. dearbhuithe laga nó iompar gan tástáil) a chaillfeadh cumhdach.

Is í tuiscint air seo — go nochtann tástáil shóchainte tástálacha laga atá i bhfolach taobh thiar de chumhdach ard — an príomhluach, ag dul i ngleic leis an teorannú nach ráthaíonn cumhdach ard tástálacha maithe.

Léiríonn tuiscint ar na **nithe le breithniú** — go bhfuil sí **costasach ó thaobh ríomhaireachta** (an tsraith á rith uair amháin in aghaidh gach sócháin, rud a fhágann go bhfuil sí mall), gur sochán bréagacha marthanacha le déanamh neamhairde díobh iad "sócháin choibhéiseacha" (sócháin nach n-athraíonn an t-iompar), agus go bhfuil uirlisí ann (Stryker, PIT, mutmut) — feasacht phraiticiúil ar cathain agus conas í a úsáid (ar chód criticiúil, go tréimhsiúil, seachas go leanúnach).

Ós rud é go bhfuil cáilíocht na dtástálacha tábhachtach i ndáiríre (is féidir le cumhdach amháin muinín bhréagach a thabhairt) agus go soláthraíonn tástáil shóchainte tomhas i bhfad níos láidre trí sheiceáil an n-aimsíonn na tástálacha fabhtanna i ndáiríre, agus ós rud é go bhfuil tuiscint uirthi, ar a buntáiste thar chumhdach, agus ar a nithe praiticiúla le breithniú úsáideach chun sraitheanna tástála a mheas agus a fheabhsú go fírinneach, is eolas luachmhar ar leibhéal sinsearach é tuiscint ar thástáil shóchainte — teicníc shofaisticiúil chun fíorcháilíocht na dtástálacha a thomhas, ag dul i ngleic le príomhlaige an chumhdaigh, agus ag léiriú na tuisceana níos doimhne ar éifeachtacht na dtástálacha a bhfuiltear ag súil léi do róil shinsearacha a bhaineann le fíorcháilíocht tástála, ní díreach figiúirí cumhdaigh.