Hoe je een flow e-mail A/B test

Wat je leert

Leer hoe je Klaviyo's A/B-test ervaring kunt gebruiken om individuele e-mails te testen in een flow, inclusief zaken als onderwerpregel, kortingen en e-mailinhoud, etc. Je kunt zelfs A/B-tests gebruiken om te bepalen of e-mails met platte tekst beter presteren dan HTML-e-mails met veel afbeeldingen.

Over flow en A/B-tests

flow e-mail A/B-test omvat de processen van:

1. Maak een enkele flow e-mail en plan deze e-mail in om na een bepaald aantal uren of dagen te versturen, net zoals je normaal zou doen.
2. Twee of meer e-mailvariaties configureren voor deze ene flow e-mail - de onderwerpregel of kerninhoud van de e-mail voor elke variatie aanpassen.
3. Het gewicht van elke variatie selecteren om het percentage ontvangers te bepalen dat elke e-mail zal ontvangen.
4. Een winnende variatie automatisch laten kiezen nadat statistische significantie is bereikt, of handmatig een winnaar kiezen op basis van het hoogste openingspercentage of het hoogste klikpercentage onder de variaties.

Voer een flow e-mail A/B-test uit

Het maken van een A/B-test kan eenvoudig via de flow builder. Merk op dat nadat een test voor een e-mail is voltooid, je indien nodig in de toekomst nog een test voor dezelfde e-mail kunt maken. 

Maak een nieuwe test

1. Om een A/B-test in te stellen voor een individuele e-mail in een flow, klik je op de e-mail in de flow builder.
2. Configureer de inhoud van de e-mail als je dat nog niet hebt gedaan.
3. Klik op A/B-test aanmaken in het e-maildetailvenster.
   

Variatie bewerken

Nadat je een nieuwe test hebt gemaakt, ga je direct naar het tabblad A/B-test van het venster Inhoud beheren . Elke test bevat automatisch 2 variaties. Als je op een variatie klikt, kun je de variatienaam, onderwerpregel, voorbeeldtekst, afzendernaam en e-mailadres van de afzender bewerken.

1. Om de inhoud van de e-mail te bewerken, klik je op de knop Bewerken Email boven het e-mailvoorbeeld aan de rechterkant.
   

Een nieuwe variatie toevoegen

Indien u een andere variant wilt toevoegen, dient u een van de twee bestaande varianten te klonen. 

1. Klik op het klonenpictogram rechts van de variatie waarop je je nieuwe variatie wilt baseren.
   
2. Hierdoor wordt een nieuwe variatie aangemaakt die u kunt aanpassen om deze te onderscheiden van de oorspronkelijke 2 variaties.
   

Een variatie verwijderen

Een A/B-test moet minstens 2 variaties hebben, dus een variatie kan alleen worden verwijderd als er 3 of meer zijn. Bovendien kan variatie alleen worden verwijderd als een test de status Concept heeft. Variatie verwijderen is uitschakelen voor live A/B-tests.

1. Om een variatie te verwijderen, klik je op het prullenbakpictogram rechts van de variatie die je wilt verwijderen.
   

Kies het gewicht van elke variatie

Onderaan het tabblad A/B-test zie je het gedeelte Testinstellingen waar je het gewicht van elke variatie kunt bewerken - dit bepaalt het percentage ontvangers dat elke variatie ontvangt. 

Je kunt ook de optie selecteren om automatisch een distributie te kiezen. Hierdoor zal de verdeling in eerste instantie voor elke variatie gelijk zijn. Na verloop van tijd, als een van de variaties beter presteert dan de andere, zal Klaviyo automatisch de verdeling aanpassen om meer ontvangers naar de beter presterende variatie te leiden terwijl de test nog loopt.

Winnaarselectie configureren

Tests kiezen standaard automatisch een winnaar op basis van het klikpercentage, maar dit kan worden gewijzigd.

1. In het gedeelte Testinstellingen onder aan het tabblad A/B Test kun je ook de winnaarsselectie configureren door te klikken op de link Configureren onder Winnaarsselectie.
   
   
   
2. Er verschijnt een modaal venster waarin u de Winning meetwaarde kunt wijzigen in openingspercentage.
   Voor flow e-mail zijn alleen openingspercentage en klikpercentage beschikbaar als winnende meetwaarde.
   Het gebruik van klikpercentage wordt aanbevolen omdat veel factoren zoals Apple Mail Privacy Protection (MPP) een opgeblazen openingspercentage kunnen veroorzaken. Ga voor volledige informatie over het openen van MPP naar onze gids iOS 15: hoe bereid je je voor op de wijzigingen van Apple.
   
3. In het gedeelte Automatische winnaars selecteren zijn er twee opties:
   1. Eindtest als met hoge statistische zekerheid (statistische significantie) is vastgesteld dat de winnende meetwaarde wint: deze optie is standaard aangevinkt. Vink het vakje naast deze optie uit als je de test handmatig wilt beëindigen of kies de optie om de test na een bepaalde datum te beëindigen.
   2. Stel een datumlimiet in: met deze optie kun je een specifieke datum selecteren waarop de test automatisch wordt beëindigd.
4. Als je beide opties selecteert, wordt de test beëindigd als statistische significantie wordt bereikt of als de opgegeven datum wordt bereikt, afhankelijk van wat zich het eerst voordoet.
5. Klik op de knop Instellingen opslaan om uw configuratie te bevestigen.

Een test publiceren

1. Zodra je je variatie hebt geconfigureerd, ben je klaar om je test te publiceren. Klik op het tabblad A/B-test op de knop Test publiceren in de rechterbovenhoek.
   
   
   
2. Er verschijnt een venster waarin u wordt gevraagd de publicatie te bevestigen. Klik op de knop Test publiceren om te bevestigen.
   

Een test verwijderen

1. Als je een test wilt verwijderen, klik je op het tabblad A/B-test op het pijltje naast de knop Test publiceren en selecteer je Verwijderen.
   

A/B-testresultaten bekijken

1. Je kunt de resultaten van een test bekijken terwijl deze wordt uitgevoerd of na voltooiing door op de e-mail in de flow builder te klikken en op de knop Test bekijken te klikken.
   

Dit brengt je naar de pagina A/B-testresultaten waar je de volgende meetwaarde kunt bekijken:

• ontvangers
  Hoeveel mensen hebben de e-mail ontvangen?
• Opens
  Welk percentage/aantal mensen heeft de e-mail geopend 
• Klikken
  Welk percentage/aantal mensen heeft door de e-mail geklikt
• conversie meetwaarde
  Totaal aantal ontvangers die de conversie meetwaarde activeren voor de geselecteerde conversie meetwaarde voor de e-mail, zoals Placed Order.

Zie voor meer gedetailleerde informatie over de A/B-testresultatenpagina ons artikel over hoe je e-mail A/B-testresultaten voor flow kunt bekijken.

Handmatig een winnaar kiezen

In de meeste gevallen zul je willen wachten tot je A/B test automatisch een winnaar kiest, maar er kan een situatie zijn waarin je een A/B test vroegtijdig wilt beëindigen. Volg in dat geval de onderstaande stappen.

1. Op de pagina met A/B-testresultaten kun je handmatig een winnende variatie voor de test kiezen door op de knop Kies winnaar rechtsboven op de pagina te klikken.
   
   
   
2. Er verschijnt een venster waarin u wordt gevraagd om uit elk van uw bestaande variaties een winnaar te kiezen. Selecteer de variant die u wenst te winnen in het dropdownmenu en klik vervolgens op de knop 'Winnaar kiezen '.
   

Extra hulpbronnen

Meer informatie over A/B-testen in flow:

• A/B-test een flow tak
• Beste praktijken voor A/B-tests