AA-testing
A/A testing
Test som kjører to identiske varianter mot hverandre for å avdekke støy og feil i testverktøyet før en reell A/B-test.
Hva er A/B-testing?
Hva er A/B-testing?
A/B-testing er en metode i CRO-arbeid der trafikk deles tilfeldig mellom to versjoner av en nettside, et skjema eller en annonse, for å avgjøre hvilken variant som gir best konverteringsfrekvens. Resultatet vurderes ved hjelp av statistisk signifikans, slik at man kan skille reelle forbedringer fra tilfeldige utslag.
Viktigste punkter
- Trafikken splittes tilfeldig og likt mellom variant A og variant B.
- Kun én endring testes per gang for å isolere effekten av den.
- Testen kjøres til utvalget er stort nok til å nå statistisk signifikans.
- Vinnende variant implementeres permanent for alle brukere etter testperioden.
- Brukes ofte til å teste CTA-tekst, overskrifter, bilder og skjemaer.
Ofte stilte spørsmål
- Hva er forskjellen på A/B-testing og multivariat testing?
- A/B-testing tester én endring mellom to varianter, mens multivariat testing tester flere elementer samtidig i ulike kombinasjoner.
- Hva er forskjellen på A/B-testing og AA-testing?
- AA-testing sammenligner to identiske versjoner for å kontrollere at testverktøyet fungerer riktig, mens A/B-testing sammenligner to ulike versjoner.
- Hvor lenge bør en A/B-test kjøre?
- Testen bør kjøre til utvalgsstørrelsen beregnet med MDE er nådd, slik at resultatet blir statistisk pålitelig.
- Hvilke elementer kan man A/B-teste?
- Man kan teste overskrifter, CTA-tekst, bilder, layout, priser og nesten alle andre synlige elementer på en side.
- Når er en A/B-test statistisk signifikant?
- Testen er signifikant når resultatet med stor sannsynlighet skyldes den faktiske endringen og ikke tilfeldig variasjon.
Relaterte termer
Ankereffekten
Anchoring effect
Kognitiv skjevhet der det første tallet eller referansepunktet man ser påvirker hvordan man vurderer priser og verdier videre.
Blikksporing
Gaze tracking
Teknologi som registrerer hvor brukeren ser på en skjerm, brukt til å analysere hva som fanger oppmerksomhet i grensesnittet.
Trenger du hjelp med cro?
Vi setter opp, forvalter og måler cro for annonsører i Norge og Europa.