Een A/B-test doen in een WhatsApp-flow

Wat je leert

Leer hoe je de A/B-test van Klaviyo kunt gebruiken om individuele WhatsApp-berichten in een flow te testen.

Over flow en A/B-test

flow WhatsApp A/B-test omvat de processen van:

1. Eén WhatsApp-bericht maken als onderdeel van een flow.
2. 2 of meer WhatsApp-templatevariaties configureren met behulp van bestaande templates.
3. Het gewicht van elke variatie selecteren om het percentage ontvangers vast te stellen dat elke template ontvangt.
4. Automatisch een winnende variatie kiezen wanneer de resultaten statistisch significant zijn of op een opgegeven einddatum, of handmatig een winnaar selecteren. Bij automatische selectie wordt het openingspercentage of het klikpercentage (CR) gebruikt dat je kiest.

WhatsApp A/B-test uitvoeren

Maak een A/B-test via de flow builder. Deze stappen zijn bedoeld voor berichten die WhatsApp-templates gebruiken. Voordat je begint, kies je een template voor het bericht dat je wilt testen. Je hebt toestemming nodig om flowcontent te bewerken en de berichtstatus te wijzigen.

Een nieuwe A/B-test maken

1. Klik in de flowbouwer op het WhatsApp-bericht dat je wilt testen.
2. Klik op A/B-test maken in het paneel WhatsApp-gegevens.

Variatie bewerken

Nadat je een nieuwe test hebt gemaakt, word je direct naar de A/B-testconfiguratiepagina gebracht. De test start met je oorspronkelijke template als variatie A en een kopie van die template als variatie B.

Een A/B-test voor een WhatsApp-flow kan 2–25 variaties bevatten.

1. Klik op Template kiezen naast variatie B.
2. Selecteer in de WhatsApp-templategalerij de bestaande template die je wilt testen.

Opmerking: Alleen reeds bestaande templates kunnen als variatietemplate worden gebruikt.

1. Bevestig je selectie door op Template gebruiken te klikken.

1. Optioneel: als je vóór het publiceren nog een variatie wilt toevoegen, open je het menu met de drie puntjes van een variatie en selecteer je Variatie klonen. Kies daarna een andere template voor de nieuwe variatie en bevestig die.

Testinstellingen aanpassen

In het gedeelte Testinstellingen onderaan het configuratievenster kun je de winnende meetwaarde, de verkeersverdeling voor variaties en de criteria voor het beëindigen van de test configureren.

1. Winnende meetwaarde
   1. Selecteer welke meetwaarde wordt gemeten om de best presterende template te bepalen. Kies tussen openingspercentage en klikpercentage (CR).
2. Distributie van verzendingen
   1. Zet de schakelaar Verzendverdeling aan voor automatische toewijzing: het verkeer wordt in het begin in een gelijkmatige splitsing verdeeld en verschuift tijdens de test naar de beter presterende variaties. Zet hem uit om vaste percentages in te voeren voor elke variatie. De percentages moeten in totaal 100% zijn.
3. Eindcriteria
   • Als je de test handmatig wilt beëindigen, schakel je Automatische winnaarselectie uit.
   • Om de test automatisch te beëindigen, zet je Automatische winnaarselectie aan en selecteer je een of beide van deze criteria:
     • Test beëindigen op basis van statistische significantie beëindigt de test wanneer Klaviyo een statistisch significante winnaar identificeert voor je geselecteerde meetwaarde.
     • Selecteer Stel een datumlimiet in en kies vervolgens een toekomstige Einddatum om de test op die datum te beëindigen. De datum wordt geëvalueerd in UTC.
   • Als beide zijn geselecteerd, wordt de test beëindigd zodra aan een van beide criteria is voldaan.
4. Voeg notities toe om je redenering voor de opzet en de opzet van je experiment bij te houden.

Als je UTM (Urchin Tracking Module)-links gebruikt, zet je Links afzonderlijk bijhouden in elke variatie aan om UTM's afzonderlijk bij te houden.

De test publiceren

Opmerking: alle templates die in de test worden gebruikt, moeten worden goedgekeurd voordat je deze kunt publiceren. Door te publiceren worden het bericht en de variaties live gezet.

Klik bovenaan de pagina op Test publiceren. Controleer de bevestiging en klik daarna opnieuw op Test publiceren om de test te starten.

Live testresultaten bekijken

Als je de resultaten van een live test wilt bekijken, ga je naar de flow builder, klik je op het WhatsApp-bericht en klik je op Test bekijken in het paneel WhatsApp-details.

Handmatig een winnaar kiezen

1. Klik op de resultatenpagina van de livetest op Kies winnaar.
2. Selecteer een variatie in Winnende variatie kiezen en klik vervolgens op Winnaar kiezen om te bevestigen. De test eindigt en de geselecteerde variatie wordt het bericht dat in deze stap in de flow naar toekomstige ontvangers wordt verzonden.

Resultaten bekijken

Als je een voltooide test wilt bekijken, klik je op het WhatsApp-bericht in de flow builder en klik je vervolgens op Resultaten bekijken in het paneel WhatsApp-details. Als je een eerdere test wilt bekijken, kies je deze in de testdropdown bovenaan de resultatenpagina.

Lees voor meer informatie over het interpreteren van win probability en de winnende meetwaarde E-mail-A/B-testresultaten voor flow beoordelen.

Extra hulpbronnen