Inzicht in statistische significantie in stromen

Wat je leert

Leer wanneer de resultaten van een A/B-test als statistisch significant worden beschouwd in Klaviyo flow. In dit artikel wordt uitgelegd wat statistische significantie is voor stroming en wanneer dat wordt besloten.

Statistische significantie is wanneer Klaviyo wiskundig kan bepalen of een variatie betere prestaties oplevert. Je kunt een flow A/B test zo configureren dat er automatisch een winnende variatie wordt gekozen zodra de testresultaten statistisch significant worden geacht.

A/B-testen is de sleutel tot het vergroten van de betrokkenheid en het verbeteren van je klantrelaties door middel van een gegevensgestuurde aanpak. Het is belangrijk om te begrijpen of de test als statisch significant kan worden beschouwd of niet. Als een flow e-mail bijvoorbeeld 2 variaties heeft en variatie A heeft een klikpercentage van 15% terwijl variatie B een klikpercentage van 14% heeft, hoe weet je dan zeker of variatie A of B beter presteert?

Hoe Klaviyo statistische significantie bepaalt in stromen

Voor flow observeert Klaviyo zowel het aantal mensen dat een bericht heeft ontvangen als de winkans, wat aangeeft hoe waarschijnlijk het is dat een variatie betere resultaten oplevert op basis van hoe goed deze de andere variatie(s) overtreft.

Een flow berichtvariatie wordt statistisch significant geacht als:

• Ten minste 500 ontvangers hebben elke variatie ontvangen.
• Een variatie heeft minstens 90% winkans.

De winkans wordt berekend op basis van de meetwaarde die je hebt gekozen bij het configureren van je A/B-test. Standaard is deze meetwaarde het klikpercentage van het bericht dat je aan het testen bent. In het gedeelte Automatische winnaarsselectie heb je de optie om de test automatisch te beëindigen zodra is vastgesteld dat een berichtvariatie wint op basis van de geconfigureerde meetwaarde, maar ook de optie om de test te beëindigen zodra een specifieke datum is bereikt. Je kunt een van deze opties of beide selecteren. Als beide worden geselecteerd, wordt de test beëindigd op basis van wat het eerst wordt bereikt, statistische significantie of de opgegeven datum.

Zie voor meer informatie ons artikel over hoe je een flow e-mail A/B test.

Als je de resultaten van een lopende test bekijkt, zie je de winkans in de rechter zijbalk in het gedeelte A/B-test. Hier zie je of de testresultaten statistisch significant zijn en welke variatie waarschijnlijk beter presteert.

Zie voor meer informatie ons artikel over hoe je e-mail A/B-testresultaten kunt beoordelen op flow.

Extra hulpbronnen

afrekenen ons artikel over best practices voor A/B-tests. 

Leer meer over andere A/B-tests die je kunt uitvoeren:

• Hoe je een flow e-mail A/B test
• Hoe je een campagne-e-mail kunt A/B-testen
• Hoe je een aanmeldingsformulier A/B test