Een A/B-test heeft negen levens. Negen levensfases, beter gezegd. Deze fases beschrijven in totaal het hele CRO-proces van het begin van een test tot het einde.
Voor een idee levensvatbaar is, staat deze vaak tussen honderden andere ideeën op een backlog. Als de tijd rijp is om het idee op te pakken, de prioritering uitwijst dat het zover is, dan kan de kat… eh, het idee, geboren worden.
Hoe mijn CRO-proces er bij NU.nl uitzag:
- Hypothese: Er wordt een hypothesis aan een idee gekoppeld. Een hypothese kan er als volgt uitzien: Als we [verandering] doen, verwachten we dat bezoekers [zo reageren] vanwege [data/eerdere test/etc], waardoor [metric] doet.
- Design: In deze fase gaat een (UX)-designer aan het werk om een uitwerking van het plan te maken.
- Development: De test wordt gebouwd.
- QA: De test wordt gecheckt (twee manieren om een A/B-test te checken) door een CRO-specialist of een tester.
- LIVE: Joepie! De test staat live. Je kunt als CRO-specialist in de gaten houden of alles er in de data goed uitziet.
- Analyze: de test gaat uit en het is tijd om de data-analyse te doen. Wellicht heb je ook een Usabilla-formulier aan je test gehangen die je kan analyseren.
- Learnings: in deze fase presenteer je de learnings en vervolgstappen aan zoveel mogelijk mensen en in zoveel mogelijk kanalen.
- Implementation: de test wordt doorgevoerd en gaat live voor 100% van de traffic.
- Done: de test gaat op de lijst met afgeronde testen. De CRO-specialist verwerkt en archiveert alle gevonden learnings goed.
Als bonus-proces heb ik ook nog de stap: FAIL. Daar komen testen te staan waaraan wel begonnen is, maar die ergens in het proces zijn vastgelopen. Ook die testen tel ik graag mee in het aantal testen dat gebouwd of gedaan is, omdat er vaak wel iets van geleerd is over mogelijkheden van platform of politieke organisatie achter de website.
