Et tilfeldig positivt undersegment kan oppstå når mange segmenter undersøkes samtidig.
Eksperimentmålgruppe før resultater deles opp
Definer hvem endringen gjelder før testen starter. Mobil, marked og ny kunde kan være relevante segmenter, men etterpåjakt skaper falske vinnere.
Faglig utgangspunkt: Microsoft Research · Reliable online experiments ↗
Ha en primær analyse og få begrunnede segmenter. Undersøk andre mønstre som hypoteser for senere arbeid.
Prøv mønsteret
Oppgave og forventet resultat
- 01
Skriv målgruppen før du fyller beslutningsregelen.
- 02
Beskriv om deltaker eller session er fordelingsenheten.
- 03
Merk nye segmentfunn som hypoteser, ikke bekreftede gevinster.
Slik undersøker du nytten
Definer målgruppe, eksponering, nevner og primært utfall før start. Registrer hva som kan invalidere datagrunnlaget.
Se også etter bivirkninger
Datatap, feil fordeling mellom varianter, retur/refusjon, margin, tilgjengelighet og ytelse på mobil.
Dette er et forslag til undersøkelse, ikke et målt resultat. Velg én hypotese og definer målgruppen før du tester.
Lag en måleplan for dette konseptet ↗