Hoe sms campagnes A/B testen

Net als bij e-mail zijn er verschillende best practices voor het A/B-testen van sms:

• Test 1 aspect tegelijk.
• Voeg een link toe en gebruik de Klaviyo linkverkorter.
• Voor mms: houd alle afbeeldingen of GIF's onder 600 KB.
• Optimaliseer je CTA en berichttekst.

Wat testen? 

Hier zijn een paar ideeën voor wat je moet A/B-en voor sms: 

• mms versus sms
  sms presteert meestal hetzelfde of beter dan mms. Omdat mms meer credits kost, is het de moeite waard om uit te zoeken of het versturen van mms-berichten zinvol is voor je merk. 
• Emoji's
  Net als mms presteert sms zonder emoji's meestal even goed of beter. Daarnaast verkorten emoji's de tekenlimiet voor sms'en van 160 naar 70, waardoor je vaak meer credits moet gebruiken voor dat bericht. 
• Berichtlengte
  Kortere sms-berichten hebben ook een hogere betrokkenheid, maar het is de moeite waard om te testen hoe je abonnee reageert op langere sms-berichten. 
• Taal (in een bepaald gebied/land)
  Afhankelijk van je publiek wil je misschien testen welke taal het beste presteert voor een bepaald segment, gebied of land. Dit kan handig zijn als er meerdere officiële talen zijn voor een land (zoals in Zwitserland) of bij het bepalen of je in een andere taal moet verzenden naar een bepaald segment of gebied (bijvoorbeeld Montreal). 

Je moet ook verschillende soorten sms-campagnes testen, bijvoorbeeld productpromotie, nieuwsbrief, verkoop, enz. Wat goed werkt voor het ene type bericht, werkt misschien niet goed voor een ander type bericht. Verder kan een campagne andere resultaten opleveren dan een flow bericht, dus pas de resultaten van een A/B test niet toe op elk bericht dat je verstuurt.

A/B test sms-berichten

Ongeacht of je berichtinhoud of verzendmoment wilt testen, begin met het volgen van deze stappen: 

1. Klik op campagnes > > sms maken.
2. Kies je campagnenaam, ontvangers.
3. Klik op Volgende.
4. Maak je bericht in het vak Berichtinhoud (je kunt pas een A/B-test maken als je inhoud hebt toegevoegd).
5. Klik op A/B-test maken om een kopie van je bestaande bericht te maken (inclusief eventuele afbeeldingen, GIF's, personalisatie, enzovoort).
   
6. Beslis vervolgens of je dat wilt:
   1. A/B-test de inhoud van de sms 
   2. A/B test sms verzendmoment 

Inhoud sms testen

1. Klik op het dropdownmenu voor de variatie.
2. Kies de variatie die je wilt veranderen voor de test.
3. Verander slechts één aspect van het origineel (als je bijvoorbeeld een afbeelding toevoegt, verander dan verder niets aan het bericht).
4. Klik rechtsboven op Doorgaan naar testinstellingen.
5. Bekijk je A/B-testinstellingen (klik op de link om naar dat gedeelte te gaan).

Test sms verzendmoment

1. Segmenteer je publiek op locatie of land.
2. Kies welk segment je wilt A/B testen.
   Opmerking: je moet de A/B-test alleen naar een van deze segmenten sturen, zodat je niet het risico loopt dat je iemand 's avonds laat of 's ochtends vroeg een bericht stuurt. Klaviyo waarschuwt je als je campagne mogelijk stille uren zal schenden.
3. Houd de inhoud van het bericht precies hetzelfde.
4. Selecteer Doorgaan naar testinstellingen rechtsboven.
5. Klik op de pagina met A/B-testinstellingen op Test verzendmoment.
   
   
6. Kies de tijden waarop je wilt A/B testen.
7. Configureer de rest van de instellingen van de A/B-test, die in het volgende gedeelte worden besproken.

Selecteer een teststrategie

Als je account in aanmerking komt, kies dan je teststrategie uit de volgende opties:

• Winnende variatie (standaard A/B-test)
• Gepersonaliseerde variatie voor elke ontvanger

Het verschil tussen winnende variatie en gepersonaliseerde variatie

Beide opties voor de teststrategie sturen variatie naar een testgroep die bestaat uit een percentage van het totale aantal ontvangers van de campagne en testen het succes van berichten op basis van een meetwaarde naar keuze, bijvoorbeeld openingspercentage. Er zijn echter enkele belangrijke verschillen in de manier waarop elke strategie berichten verstuurt naar de rest van de ontvangers nadat de testperiode voorbij is:

• Winnende variatie - de standaardoptie voor A/B-tests, die 1 winnende variatie bepaalt en deze na afloop van de testperiode naar de rest van de ontvangers van de campagne stuurt.
• Gepersonaliseerde variatie - maakt gebruik van kunstmatige intelligentie om patronen te zoeken onder de testontvangers die interactie hebben met elke variatie. Nadat de testperiode voorbij is, zal Klaviyo voorspellen welke variatie beter zal presteren voor elke ontvanger en de rest van de ontvangers hun voorkeursvariatie sturen.

Personaliseer variatie voor elke ontvanger 

Als je wilt personaliseren welke variatie elke ontvanger individueel ontvangt, selecteer dan Gepersonaliseerde variatie voor elke ontvanger. 

Klaviyo zal informatie over elk profiel gebruiken om te bepalen welke variatie de meeste kans van slagen heeft om dat profiel te converteren. Deze profielinformatie omvat, maar is niet beperkt tot:

• Historische betrokkenheid
• Toekomstige klantwaarde
• Locatie

Als je bijvoorbeeld openingspercentage als winnende meetwaarde hebt gekozen en profiel in de testgroep met een levenslange waarde van 100 of meer openen vaker variatie A, maar profiel met een levenslange waarde van minder dan 100 openen vaker variatie B, dan ontvangt de rest van de ontvangers van de campagne sms'jes op basis van welke variatie ze volgens hun levenslange waarde het meest waarschijnlijk zullen openen. Dit is een vereenvoudigd voorbeeld, want Klaviyo zal veel gegevenspunten gebruiken om de gepersonaliseerde variatie te bepalen.

De instellingen van een A/B-test aanpassen (optioneel)

Je kunt de instellingen voor je test bekijken en aanpassen:

• De winnende meetwaarde van de test (klikpercentage of geplaatst aankooppercentage)
• Welk percentage mensen ontvangt elke variatie
• De testduur

Zodra er een winnende variatie is gekozen, wordt de winnaar naar de rest van het publiek gestuurd.

Extra hulpbronnen

• Beste praktijken voor A/B-tests
• Statistische significantie begrijpen in Klaviyo
• Hoe je A/B-tests uitvoert via flow branches
• Hoe je A/B-testresultaten voor campagnes kunt bekijken
• A/B-tests onder de knie krijgen: Klaviyo's bewezen tips & trucs om inkomsten te verhogen