A/B testing

Met A/B testen onderzoek je met een wetenschappelijke aanpak welke wijzigingen op je website of webshop leiden tot meer conversies. Hiermee kun je bijvoorbeeld de conversie ratio verbeteren en daarmee de omzet verhogen.

A/B test variaties
Test resultaten
Simulatie

Herken je dit?

  • Er gaat veel geld naar SEA en SEO, maar de resultaten zijn onder verwachting
  • Jullie hebben wel een A/B testing tool, maar doen daar te weinig mee
  • Conversie optimalisatie 'leeft' niet binnen de organisatie

En zoek je hier naar?

  • Een gestructureerde aanpak van conversie optimalisatie
  • Op basis van valide, betrouwbare, en significante AB testen
  • Uitgedacht, opgezet en gedraaid door een ervaren a/b testing specialist

€ 10 miljoen+ aan jaarlijks terugkerende omzet gegenereerd voor klanten

Uitgelichte voordelen van A/B testen

Vaste kosten per A/B test → Geen verrassingen achteraf

De kosten per test spreken we van tevoren af. Deze kosten zijn inclusief de volgende werkzaamheden: Communiceren, onderzoeken, prioriteren, uitdenken, bouwen, invoeren, nakijken, lanceren, monitoren, analyseren, rapporteren en documenteren. Geen gedoe met uren schattingen voor mij en geen verrassingen voor jullie achteraf, wel zo prettig samenwerken.

Gestructureerd proces → Meer resultaat

Uit recent onderzoek van RedEye blijkt dat bedrijven met een gestructureerd CRO proces meer resultaat boeken. Hierom maken wij voor het draaien van iedere A/B test dan ook gebruik van een uitgedacht proces. Ook worden lopende A/B testen, test ideeën en resultaten natuurlijk allemaal gestructureerd bijgehouden.

Uitgebreide rapportages → Betere learnings

De test rapportages bevatten statistisch goed onderbouwde aanbevelingen op basis van de A/B test resultaten. Ook wordt er gebruik gemaakt van geavanceerde technieken als Monte Carlo simulaties om te voorspellen wat de impact van een test op de omzet is. Duidelijke visuals en management samenvatting maken de rapportage vervolgens toegankelijk en waardevol voor alle stakeholders.

Veelgestelde vragen

Kunnen we niet gewoon zelf A/B testen opzetten?

Nee, in ieder geval geen A/B testen waarvan de resultaten valide en betrouwbaar zijn. Tegenwoordig kan iedere online marketeer of front-end developer prima een AB test opzetten in één van de bekende A/B testing tools. Zonder kennis van zaken als sample size, significantie, power, flickering, hypotheses en heuristieken zal de uitkomst echter hoogstwaarschijnlijk nutteloos zijn. A/B testen waarvan je op de uitkomsten kunt vertrouwen vragen dan ook om een expert.

Is mijn website geschikt voor AB testing?

Op vrijwel alle websites (inclusief webshops op populaire platformen zoals Magento, WooCommerce en Shopify) is het mogelijk om AB testen te draaien. Als vuistregel wordt wel een minimum van ongeveer 1,000 conversies (transacties, leads, donaties, etc.) per maand gehanteerd. Zogenaamde MVT (multivariate) testen vragen zelfs om nog veel hogere aantallen conversies. Wanneer je ver onder het aanbevolen aantal conversies zit, dan zijn AB testen waarschijnlijk niet de beste oplossing om je website te verbeteren. Mogelijk levert een website analyse of user testing in dat geval een beter rendement op.

Welke A/B testing tools ben je bekend mee?

Ik heb uitgebreide hands-on ervaring met het opzetten van A/B tests in vrijwel alle bekende A/B testing tools. In totaal gaat het hier om meerdere honderden testen die zijn opgezet in Google Optimize, Convert, VWO, Adobe Target, SiteSpect, AB Tasty, en Optimizely. Mochten jullie toevallig gebruikmaken van een andere testing tool, dan is dit geen enkel probleem. Doordat A/B testing tools in de basis uiteindelijk veel op elkaar lijken, zal er binnen no-time ook met die tool valide en betrouwbare testen opgezet kunnen worden.

Wie gaat de A/B testen bouwen?

In verreweg de meeste gevallen zal ik de uitgedachte A/B testen zelf kunnen bouwen. De JavaScript en CSS code waarmee de testen gebouwd zijn plaats ik vervolgens in de testing tool zodat daarmee de varianten tegen de control vergeleken kunnen worden. Uitzonderingen op voorgaande zijn testen waarvoor er in de A/B test informatie vanuit de backend nodig is. Denk hier bijvoorbeeld aan testen waarin de prijzen van producten getest worden of er nieuwe invulvelden aan een formulier toegevoegd dienen te worden.

Hoe wordt de voortgang gedocumenteerd?

Alle experimenten worden bijgehouden in een zogenaamde A/B testing roadmap. De experimenten krijgen hier elk een status toegewezen, zoals test idee, gepland, of afgerond. Deze roadmap is uitgewerkt als Google Sheets document. Hierdoor is het eenvoudig om diverse stakeholders (zoals product owners, webbouwers, managers, en online marketeers) inzicht te geven in welke AB testen er live staan op de website. Een bijkomend voordeel van het gebruik van Google Sheets is dat daar geen maandelijkse kosten aan verbonden zijn.

Hoeveel extra omzet levert AB testen op?

Deze hoeveelheid extra omzet is afhankelijk van meerdere factoren. Denk hierbij logischerwijs aan de huidige omzet, maar ook bijvoorbeeld de hoeveelheid testen die per maand wordt gedraaid, in hoeverre de hypotheses voor deze AB testen zijn onderbouwd met onderzoek zoals gebruikerstesten, hoe goed de AB testen worden gebouwd, etc. Het komt echter zeker voor dat één enkele AB test de omzet per gebruiker met meer dan 10% laat toenemen.

Interesse in A/B testen voor jullie organisatie?

Neem contact op

Referenties

Zeer positieve resultaten behaald

Tsjibbe Wiersma, Online Marketing Manager, Profile

Theo heeft een bijzonder scherpe blik op conversie optimalisatie en de toegevoegde waarde hiervan voor de doelstellingen van organisatie. Hij wil (in positieve zin) het onderste uit de kan halen. Bij Profile Banden en Onderhoud langere periode met elkaar samengewerkt en zeer positieve resultaten behaald. Een prettig persoon om mee te werken, helder in zijn communicatie en inhoudelijk sterk. (LinkedIn)

Uitstekend overzicht behouden

Marjolein van den Broek, Account Director, Yonego

De afgelopen jaren heb ik erg fijn samenwerkt met Theo. Hij heeft ons op CRO vlak geholpen op diverse grote accounts. Geen uitdaging is teveel voor Theo en hoe complexer hoe leuker hij het lijkt te vinden. Wat mij opviel is dat hij uitstekend in staat was om het overzicht te behouden van wat er allemaal speelde binnen de projecten. Naast zijn inhoudelijk kennis over conversie optimalisatie waren de klanten ook erg enthousiast over zijn technische skills en zijn scherpe blik. Theo is een hele goede en fijne specialist om mee samen te werken, erg loyaal en ook met droge gezellige humor. (LinkedIn)

Helpt organisaties verder

Wim Vis, Managementteam, DGN Publishers

Het klinkt misschien wat onaardig, maar Theo is by far de grootste test-nerd die ik ken. En dat werkt niet alleen fantastisch, maar ook mega-aanstekelijk. Hij weet werkelijk alles op het snijvlak van data, testen en conversie, graaft daarbij dieper dan menigeen en weet dat vervolgens eenvoudig te vertalen in heldere probleemstellingen. Maar waar veel freelancers daar stoppen, gaat Theo juist verder. Hij formuleert praktische oplossingsrichtingen voor de geconstateerde problemen. Zo helpt hij organisaties verder. En dat allemaal met een dosis humor en een buitengewoon prettige omgangsvorm. Ja, ik kan Theo zonder enige twijfel van harte aanbevelen. (LinkedIn)

Geholpen met gehele CRO-proces

Dennis Nederlof, Digital Marketing, Nexeye

Voor Hans Anders heeft Theo ons geholpen met het gehele CRO-proces. Van het neerzetten van een backlog tot het bouwen van testen en uitvoeren van analyses. En ook voor de wat technischere testen heeft hij meestal wel een oplossing om dit te realiseren. Mocht je willen starten met experimenteren of juist naar een volgend niveau, dan heb je aan Theo een goeie! (LinkedIn)

Bijzonder kundige professional

Jan de Roode, Communication Advisor, Middin

Ik heb Theo leren kennen als een bijzonder kundige professional. Met hem is het prettig samenwerken. Theo is oplossingsgericht en hij weet de vertaalslag te maken tussen wensen van de opdrachtgever en de (on-)mogelijkheden van de techniek. En bovenal niet onbelangrijk voor mij als opdrachtgever, elke deadline wordt door Theo gehaald. (LinkedIn)

Prettige samenwerking

Marijke Verkaik, Web Designer, KovokS

We hebben Theo ingehuurd om enkele websites te onderzoeken en ik beveel hem van harte aan. Niet alleen biedt hij een prettige samenwerking, maar ook een diepgaande kennis over hoe je een website kunt optimaliseren. (LinkedIn)

Klanten

  • Nike
    Nike
  • Greenchoice
    Greenchoice
  • Vodafone
    Vodafone
  • Financieele Dagblad
    Financieele Dagblad
  • Profile
    Profile
  • Pieter Pot
    Pieter Pot
  • Citroën
    Citroën
  • ZorgKiezer
    ZorgKiezer
  • Virgin Media
    Virgin Media
  • Haarshop
    Haarshop
  • Liander
    Liander
  • Schoonenberg
    Schoonenberg
Gratis en vrijblijvend adviesgesprek
Benieuwd naar de mogelijkheden? Plan dan een gratis adviesgesprek van 1 uur.

Wat is AB testen?

Bij AB testen vergelijkt een CRO specialist twee of meer varianten van website of webshop. Wat er in zo'n AB test variant is aangepast wordt bepaald op basis van vooronderzoek en een hypothese. Met behulp van statistieken zal vervolgens worden vastgesteld of er een variant is die tot significant meer conversies leidt.

Hoe voer je een AB test uit?

Het uitvoeren van AB testing kent een flink aantal stappen. Zelf heb ik die grofweg gedefinieerd als: onderzoeken, bouwen, invoeren, nakijken, aanzetten, monitoren, analyseren, rapporteren, documenteren. Houd er hierbij rekening mee dat sommige stappen veel meer tijd kosten dan andere stappen.

Wat is de meerwaarde van AB testen?

De meerwaarde van AB testen is dat je daarmee meer zekerheid krijgt over het effect van wijzigingen aan een website. Wanneer je wijzigingen namelijk gewoon doorvoert zonder ze eerst te testen, dan kunnen ze mogelijk een negatieve impact hebben op zaken als de conversieratio, gemiddelde orderwaarde, of omzet.

Hoe accuraat is AB testen?

Algemeen gezien zijn AB testen heel accurraat. Wel hangt de mate waarin AB testen accuraat af van hoe goed deze zijn opgezet. Een ervaren ab testing specialist zal rekening houden met zaken als significantie, power, outliers, looptijd, etc. Dit zorgt ervoor dat experimenten meer betrouwbaar en valide worden.