Je A/B-testresultaten voor campagnes bekijken

Wat je leert

Ontdek welke gegevens je kunt vinden op de pagina met A/B-testresultaten en wat elk van deze indicatoren betekent. De informatie in deze handleiding is van toepassing op zowel A/B-testen met e-mailcampagnes als sms-campagnes.

A/B-testcampagnes kunnen waardevolle inzichten opleveren over je doelgroep doordat je eenvoudig kunt bepalen welke wijzigingen je moet aanbrengen in je verzendstrategie. Je weet niet alleen welke variatie wint bij een A/B-test, maar ook andere belangrijke factoren, zoals de winstkans en details over de winnende meetwaarde.

A/B-testresultaten

Zo bekijk je de resultaten van een A/B-test:

1. Navigeer naar de campagne die je test.
2. Selecteer het tabblad A/B-testresultaten van het hoofdrapport van de campagne.
   

Testoverzicht

Voor een standaard A/B-test toont het gedeelte Testoverzicht het volgende:

• Winnende variatie
  Zodra een test is afgerond, is de variatie met de hoogste winnende meetwaarde voor de resultaten die je bekijkt.
• Status
  Of de A/B-test nog loopt (d.w.z. analyses verzamelt) of is voltooid.
• Kans op winst
  Hoe waarschijnlijk het is dat de winnende variatie echt het hoogste openingspercentage, klikpercentage of aankooppercentage had nadat rekening is gehouden met toeval, en of deze kans als statistisch significant wordt beschouwd.
• Lift
  Hoeveel beter de winnende variatie presteerde dan de andere variatie. Berekend op basis van de winnende meetwaarde (d.w.z. openingspercentage, klikpercentage (CR) of aankooppercentage). Voor tests met 3+ variaties wordt de op één na best presterende test gebruikt voor de vergelijking.
• Winnende meetwaarde
  De resultaten van de winnende variatie voor de meetwaarde die voor de test is gebruikt. Als bijvoorbeeld het openingspercentage is gekozen als de winnende meetwaarde, wordt het openingspercentage weergegeven.

Onder deze resultaten kun je de open- en klikpercentages (CR) van elke variatie voor e-mail bekijken, of het klikpercentage (CR) voor sms. De tabel laat ook conversieresultaten zien wanneer er een conversie-meetwaarde beschikbaar is; dit is niet altijd Placed Order.

Voor een voltooide standaard A/B-test met een testgroep die kleiner is dan het volledige publiek, gebruik je de tabbladen in Testoverzicht om het volgende te vergelijken:

• Resultaten van de testperiode toont interacties tijdens de testperiode van ontvangers in de testgroep.
• Doorlopende resultaten omvatten latere interacties van dezelfde testgroep. De leidende variatie kan veranderen naarmate er meer resultaten binnenkomen.

Bekijk hieronder de samenvatting van de winnende verzending voor interacties met de winnende variatie die na de testperiode naar de overige ontvangers is verzonden.

Hoe lift wordt berekend

Het liftpercentage is anders dan het percentage dat wordt weergegeven voor je winnende variatie. Dit komt doordat het percentage dat naast elke variatie wordt weergegeven, het percentage mensen is dat interactie had met het bericht (geopend, geklikt, bestelling geplaatst), terwijl de lift het percentage verbetering is dat de winnaar had ten opzichte van de andere variatie.

Als je bijvoorbeeld klikpercentage (CR) als je winnende meetwaarde gebruikt en variatie A 5/100 (5%) ontvangers heeft die klikken en variatie B 4/100 (4%) ontvangers heeft die klikken, is het verschil 1 procentpunt. Lift vergelijkt dat verschil met het klikpercentage (CR) van variatie B: (5% − 4%) / 4% × 100 = 25%. Variatie A heeft daarom een klikpercentage (CR) van 5% en een lift van 25% ten opzichte van variatie B.

Gepersonaliseerde variatieresultaten

Als je Gepersonaliseerde variaties voor elke ontvanger hebt gekozen, selecteer je Testperiode-resultaten zodra de test is voltooid om de volgende meetwaarden te bekijken:

• Totale A/B-testlift
  De geschatte verbetering van gepersonaliseerde variaties ten opzichte van de op één na beste variatie in een standaard A/B-test, op basis van de winnende meetwaarde (openingspercentage of klikpercentage (CR)).
• Personalisatielift
  De geschatte verbetering door gepersonaliseerde variaties vergeleken met het versturen van de winnende variatie uit een standaard A/B-test naar iedereen.
• Personalisatie openingspercentage of Personalisatie klikpercentage (CR)
  Het geschatte openingspercentage of klikpercentage (CR) voor gepersonaliseerde variaties, gebaseerd op testontvangers die de variatie ontvingen waarvan Klaviyo voorspelde dat ze die zouden verkiezen. De getoonde meetwaarde hangt af van de winnende meetwaarde die je hebt geselecteerd.
• Profielkenmerken afgeleid door Klaviyo AI
  Kenmerken die geassocieerd worden met ontvangers die meer geneigd waren om te interacten met een specifieke variatie. Vouw elke variatie uit om de kenmerken te bekijken, die per variatie kunnen verschillen.

Bekijk de Samenvatting van gepersonaliseerd verzenden voor interacties met de gepersonaliseerde variaties die na de testperiode zijn verzonden.

Inzicht in winkans en statistische significantie

Stel bijvoorbeeld dat je wilt zien of het toevoegen van emoji's aan je onderwerpregel invloed heeft op je openingspercentage bij je e-maillijst. Als je de test alleen naar 2 abonnees stuurt en de emoji's een beter openingspercentage hebben, kun je niet met zekerheid zeggen dat de rest van je e-maillijst dat ook zo zal ervaren. Als je in plaats daarvan met 100 mensen in je e-maillijst test en ontdekt dat emoji's een aanzienlijk hoger openingspercentage hebben, heb je veel meer vertrouwen dat het gebruik van emoji's in je onderwerpregels beter is voor je doelgroep.

Onder Winkans kan een voltooide standaard A/B-test een label voor statistische significantie tonen. Een resultaat is statistisch significant wanneer de winkans boven de 90% ligt en elke variatie meer dan 50 succesvolle e-mailafleveringen of pogingen tot sms-aflevering heeft. Een test kan ook veelbelovend zijn, onduidelijk zijn of niet statistisch significant zijn. Bij veelbelovende resultaten herhaal je de test om de bevinding te bevestigen. Onduidelijke resultaten tonen geen significantielabel. Meer informatie over statistische significantie in Klaviyo.

Extra hulpbronnen