Hvordan bruger du data og eksperimenter til at træffe produktbeslutninger?

Question

Accepted Answer

**Datadrevet beslutningstagning** betyder at basere produktvalg på beviser — brugsdata, eksperimenter, forskning — i stedet for kun mening alene. Den modenere version er *datainformeret*: data skærper dømmekraft, men erstatter den ikke. Målet er at reducere risikoen for at satse på et gæt.

## Kilder til beviser

```text
✓ QUANTITATIVE → analytics, funnels, retention, A/B tests (what is happening)
✓ QUALITATIVE → user interviews, support tickets, session recordings (why)
→ combine both: numbers tell you WHAT, conversations tell you WHY
```

Kvantitet uden kvalitet fortæller dig, at tragtens dråber i trin 3, men ikke *hvorfor* — og du kan ikke rette noget "hvorfor", du ikke forstår.

## Eksperimenter (A/B-test)

```text
✓ Form a HYPOTHESIS → "shorter signup → higher completion"
✓ Define the SUCCESS METRIC up front (and guardrails)
✓ Run on a meaningful, RANDOMIZED sample to significance
✓ Decide BEFORE looking → avoid cherry-picking results
✓ Beware false positives, tiny samples, and short-term wins that hurt long-term
```

Eksperimenter lader dig teste billigt og *vide* i stedet for at diskutere.

## Når data ikke er nok

Data beskriver fortid og nutid, ikke dristige nye satsninger — du kan ikke A/B-teste noget, der ikke eksisterer endnu. Store strategiske tiltag kræver vision og dømmekraft; data informerer, men opkaldet er dit. Overafhængighed af data fører til lokal optimering (hurtigere heste, aldrig bilen).

## Et konkret eksempel

Et team diskuterer en ny onboarding-flow i uger. I stedet for at diskutere indsender de begge som en A/B-test med færdiggørelse + 7-dages tilbageholdelse som metrics. Dataene afgør det på to uger — og afslører, at det "indlysende bedre" design faktisk skadede tilbageholdelsen, et resultat, som ingen gætter på.

## En almindelig fælde

Misbrug af data: plukkepladser af tal for at retfærdiggøre en forudbestemt beslutning, jagter statistisk ubetydelige udsving eller optimerer en metrik til et værre samlet produkt (Goodharts lov).

## Hvorfor det betyder noget

Intuition er ofte forkert, og selvsikre meninger kolliderer uendeligt.

Beviser løser diskussioner objektivt og fanger kontraintuitive sandheder, der ellers ville blive sendt som dyre fejl.

Brugt godt — som et supplement til dømmekraft, ikke en erstatning — forvandler data produktudvikling til en læringssløjfe, der sammensættes i stedet for en række validerede satsninger.