Hoe je A/B-testresultaten voor campagnes kunt bekijken

Wat je leert

Leer welke gegevens je kunt vinden op de pagina met A/B-testresultaten en wat elk van deze indicatoren betekent. De informatie in deze gids is van toepassing op zowel A/B-tests met e-mailcampagnes als sms-campagnes.

A/B-testcampagnes kunnen waardevolle inzichten geven in je publiek door het eenvoudig te maken om te bepalen welke veranderingen je moet aanbrengen in je verzendstrategie. Zo weet je niet alleen de winnende variatie voor een A/B-test, maar ook andere belangrijke factoren, zoals het betrouwbaarheidspercentage en de details van de winnende meetwaarde.

A/B-testresultaten

De resultaten van een A/B-test bekijken: 

1. Navigeer naar de campagne die je aan het testen bent.
2. Selecteer het tabblad A/B-testresultaten van het hoofdrapport van de campagne.
   

Testoverzicht

In het gedeelte Testresultaten zie je een momentopname met het volgende:

• Winnende variatie
  Als een test is afgerond, wordt de winnende variatie weergegeven. 
• Status
  Of de A/B-test aan de gang is (d.w.z. analyses verzamelt) of voltooid is.
• Waarschijnlijkheid winnen
  Hoe waarschijnlijk is het dat de winnende variatie echt het hoogste open-, klik-, of geplaatste aankooppercentage had nadat rekening is gehouden met willekeurig toeval account, en of deze waarschijnlijkheid statistisch significant wordt geacht.
• Lift
  Hoeveel beter de winnende variatie presteerde dan de andere variatie. Berekend op basis van de winnende meetwaarde (d.w.z. openingspercentage, klikpercentage of geplaatst aankooppercentage). Voor tests met 3+ variatie wordt de op één na best presterende test gebruikt ter vergelijking.
• Winnende meetwaarde
  De resultaten van de winnende variatie voor de meetwaarde die is gebruikt voor de test. Als bijvoorbeeld openingspercentage is gekozen als winnende meetwaarde, dan zou het openingspercentage worden getoond.

Onder deze resultaten kun je het open-, klik- en geplaatste aankooppercentage bekijken voor elke variatie in de test.

Hoe lift wordt berekend

Het liftpercentage is anders dan het percentage dat wordt getoond voor je winnende variatie. Dit komt omdat het percentage dat naast elke variatie wordt weergegeven het percentage mensen is dat interactie had met de e-mail (openen, klikken, bestelling plaatsen), terwijl de lift het percentage verbetering is dat de winnaar had ten opzichte van de andere variatie.

Als je bijvoorbeeld klikpercentage gebruikt als je winnende meetwaarde en variatie A heeft 5/100 (5%) ontvangers klik en variatie B heeft 4/100 (4%) ontvangers klik, dan is het verschil tussen de variaties 1 klik. Dat betekent dat de lift 1/5 (20%) was. Met andere woorden, de lift was 20% met variatie A met een klikpercentage van 5% en variatie B met een klikpercentage van 4%.

Gepersonaliseerde variatieresultaten

Als je de optie hebt gekozen om variatie te personaliseren voor elke ontvangers, zie je iets andere meetwaarde op de pagina met testresultaten, waaronder het volgende:

• Totale A/B-test lift
  Hoeveel beter de beste variatie presteerde ten opzichte van de op één na beste variatie. Berekend op basis van de winnende meetwaarde (d.w.z. openingspercentage of klikpercentage).
• Personalisatielift
  Percentage van hoeveel succesvoller de gepersonaliseerde test was ten opzichte van een standaard A/B-test.
• Personalisatie klikpercentage
  Het gemiddelde klikpercentage onder alle variaties van profielen die hun voorkeursvariatie hebben ontvangen.
• profielkenmerken afgeleid door Klaviyo AI
  Een lijst van de gegevens die door de kunstmatige intelligentie zijn gebruikt om een patroon te bepalen onder profielpersonen die de voorkeur gaven aan een specifieke variatie, d.w.z. welke factoren er waarschijnlijk voor zorgden dat iemand de voorkeur gaf aan de ene variatie boven de andere. Klik op elke variatie om de gebruikte gegevens te zien, want deze verschillen per variatie.

Inzicht in vertrouwen winnen en statistische significantie

Stel bijvoorbeeld dat je wilt zien of het toevoegen van emoji's aan je onderwerpregel invloed heeft op je openingspercentage met je e-maillijst. Als je de test maar naar 2 abonnees stuurt en de emoji's hebben een beter openingspercentage, kun je niet met zekerheid zeggen dat de rest van je e-maillijst er ook zo over denkt. Als je in plaats daarvan een test zou doen met 100 mensen in je e-maillijst en zou ontdekken dat emoji's een aanzienlijk hoger openingspercentage hebben, zou je er veel meer vertrouwen in hebben dat het gebruik van emoji's in je onderwerpregel beter is voor je publiek.

Onder Win waarschijnlijkheid zie je of de getoonde variatie statistisch significant is of niet. Als het significant wordt geacht, betekent dit dat de variatie een hoge winkans heeft (d.w.z. 90% of hoger). Een test kan ook veelbelovend, onovertuigend of niet statistisch significant zijn. Meer informatie over statistische significantie in Klaviyo.

Extra hulpbronnen

• Beste praktijken voor A/B-tests
• Hoe je een aanmeldingsformulier A/B test
• Hoe je een individuele flow-e-mail kunt A/B-testen
• Hoe je een campagne-e-mail kunt A/B-testen