Hoe je een A/B-test uitvoert voor een flow-e-mail

Wat je leert

Ontdek hoe je de A/B-test-ervaring van Klaviyo gebruikt om afzonderlijke e-mails in een flow te testen, waaronder zaken als onderwerpregel, kortingen en e-mailinhoud, enz. Je kunt A/B-tests zelfs gebruiken om te bepalen of platte-tekste-mails beter presteren dan HTML-e-mails met veel afbeeldingen.

Over flows en A/B-testen

A/B-testen voor flow-e-mails omvatten de volgende processen:

1. Eén flow-e-mail maken en deze e-mail zo plannen dat hij na een bepaald aantal uren of dagen wordt verzonden, net zoals je normaal zou doen.
2. Twee of meer e-mailvariaties configureren voor deze ene flow-e-mail — waarbij je de onderwerpregel of de belangrijkste e-mailinhoud aanpast voor elke variatie.
3. Het gewicht van elke variatie selecteren om het percentage ontvangers vast te stellen dat elke e-mail ontvangt.
4. Een winnende variatie automatisch laten kiezen zodra statistische significantie is bereikt, of handmatig een winnaar kiezen op basis van het hoogste openingspercentage of het hoogste klikpercentage (CR) onder variaties.

Een flow-e-mail-A/B-test uitvoeren

Het maken van een A/B-test kan eenvoudig via de flow builder. Houd er rekening mee dat je nadat een test voor een e-mail is afgerond, later indien nodig nog een test voor dezelfde e-mail kunt maken.

Een nieuwe test aanmaken

1. Als je A/B-test wilt instellen voor een afzonderlijke e-mail in een flow, klik je op de e-mail in de flow builder.
2. Configureer de inhoud van de e-mail als je dat nog niet hebt gedaan.
3. Klik op A/B-test maken in het paneel E-mailgegevens.
   

variaties bewerken

Nadat je een nieuwe test hebt gemaakt, kom je direct terecht op het tabblad A/B Test van het venster Content beheren . Elke test bevat automatisch 2 variaties. Wanneer je op een variatie klikt, kun je de naam van de variatie, de onderwerpregel, de voorbeeldtekst, de afzendernaam en het e-mailadres van de afzender bewerken.

1. Om de inhoud van de e-mail te bewerken, klik je op de knop E-mail bewerken boven de e-mailvoorbeeldweergave rechts.
   

Voeg een nieuwe variatie toe

Als je nog een variatie wilt toevoegen, moet je 1 van de 2 bestaande variaties klonen.

1. Klik op het kloonpictogram rechts van de variatie waarop je je nieuwe variatie wilt baseren.
   

2. Hiermee maak je een nieuwe variatie die je kunt aanpassen zodat deze verschilt van de oorspronkelijke 2 variaties.
   

Een variatie verwijderen

Een A/B-test moet minimaal 2 variaties hebben, dus een variatie kan alleen worden verwijderd wanneer er 3 of meer zijn. Daarnaast kunnen variaties alleen worden verwijderd wanneer een test de status Concept heeft. Variaties verwijderen is uitgeschakeld voor live A/B-tests.

1. Als je een variatie wilt verwijderen, klik je op het prullenbakpictogram rechts van de variatie die je wilt verwijderen.
   

Kies het gewicht van elke variatie

Onderaan het tabblad A/B-test zie je de sectie Testinstellingen waar je de weging van elke variatie kunt bewerken – hiermee stel je het percentage ontvangers vast dat elke variatie ontvangt.

Je kunt ook de optie selecteren om automatisch de distributie te kiezen. Dit stelt de verdeling in het begin gelijk in voor elke variatie. Na verloop van tijd, als een van de variaties beter presteert dan de andere, past Klaviyo automatisch de distributie aan om meer ontvangers naar de beter presterende variatie te sturen terwijl de test nog loopt.

Winnaarselectie configureren

Tests staan standaard ingesteld op het automatisch kiezen van een winnaar op basis van het klikpercentage (CR), maar dit kan worden gewijzigd.

1. In het gedeelte Testinstellingen onderaan het tabblad A/B-test kun je ook winnaarskeuze instellen door op de link Configureren te klikken onder Winnaarskeuze.
   
   
   

2. Er verschijnt een modal waarin je de winnende meetwaarde kunt wijzigen naar openingspercentage.

1. In de sectie Automatische winnaarselectie zijn er 2 opties:
   1. Test beëindigen als wordt vastgesteld dat de winnende meetwaarde met hoge statistische zekerheid zal winnen (statistische significantie): deze optie is standaard aangevinkt. Vink het selectievakje naast deze optie uit als je de test liever handmatig beëindigt of kies de optie om de test na een specifieke datum te beëindigen.
   2. Stel een datumlimiet in: met deze optie kun je een specifieke datum selecteren om de test automatisch te beëindigen.
2. Als je beide opties selecteert, wordt de test beëindigd zodra statistische significantie is bereikt of zodra de opgegeven datum is bereikt, afhankelijk van wat het eerst gebeurt.
3. Klik op de knop Instellingen opslaan om je configuratie te bevestigen.

Test publiceren

1. Zodra je je variaties hebt geconfigureerd, ben je klaar om je test te publiceren. Ga naar het tabblad A/B-test en klik rechtsboven op de knop Test publiceren.
   
   
   

2. Er verschijnt een venster waarin je wordt gevraagd de publicatie te bevestigen. Klik op de knop Test publiceren om te bevestigen.
   

Een test verwijderen

1. Als je een test wilt verwijderen, klik je op het tabblad A/B Test op de pijl naast de knop Test publiceren en selecteer je Verwijderen.
   

A/B-testresultaten bekijken

1. Je kunt de resultaten van een test bekijken terwijl deze loopt of nadat deze is voltooid door in de flow builder op de e-mail te klikken en op de knop Test bekijken te klikken.
   

Dit brengt je naar de pagina A/B-testresultaten waar je de volgende meetwaarden kunt bekijken:

• Ontvangers
  Hoeveel mensen de e-mail hebben ontvangen
• Openingen
  Welk percentage/aantal mensen heeft de e-mail geopend
• Kliks
  Welk percentage/aantal mensen in de e-mail heeft doorgeklikt
• Conversiemeetwaarde
  Totaal aantal ontvangers dat de conversiemeetwaarde heeft getriggerd, de geselecteerde conversiemeetwaarde voor de e-mail, zoals Placed Order.

Bekijk voor meer gedetailleerde informatie over de pagina met A/B-testresultaten ons artikel over hoe je A/B-testresultaten voor e-mail voor flows beoordeelt.

Handmatig een winnaar kiezen

In de meeste gevallen wilt u wachten tot uw A / B-test automatisch een winnaar kiest, maar er kan een situatie zijn waarin u een A / B-test vroegtijdig wilt beëindigen. Volg in dat geval de onderstaande stappen.

1. Op de pagina A/B-testresultaten kun je handmatig een winnende variatie voor de test kiezen door rechtsboven op de knop Winnaar kiezen te klikken.
   
   
   

2. Er verschijnt een modaal venster waarin je wordt gevraagd een winnaar te kiezen uit al je bestaande variaties. Selecteer de variatie die je wilt laten winnen in de vervolgkeuzelijst en klik vervolgens op de knop Winnaar kiezen.