Comment effectuer un test A/B sur une campagne par SMS
Objectif de cet article
Découvrez dans cet article comment effectuer un test A/B sur les campagnes par SMS et les éléments à tester.
Avec l’A/B testing de Klaviyo SMS, vous obtenez des insights sur votre audience et vous utilisez ces informations pour optimiser vos messages et vos heures d’envoi. Cet article explique comment effectuer des tests de campagne. Vous pouvez également tester vos messages de flux SMS à l’aide du fractionnement.
Bonnes pratiques en matière d’A/B testing des SMS
Comme pour les e-mails, il existe plusieurs recommandations pour l’A/B testing des SMS :
- Testez un élément à la fois.
- Incluez un lien et utilisez le raccourcisseur de liens Klaviyo.
- Pour les MMS : veillez à ce que les images et les GIF ne dépassent pas 600 Ko.
- Optimisez votre CTA et le texte de votre message.
Éléments à tester
Voici quelques idées de tests A/B pour les SMS :
- MMS vs SMS
Les performances des SMS sont généralement équivalentes ou supérieures à celles des MMS. Comme les MMS coûtent plus cher, il vaut la peine de déterminer si l’envoi de MMS est pertinent pour votre marque. - Emojis
Comme les MMS, les messages SMS sans emojis ont tendance à offrir des performances identiques, voire meilleures. De plus, les emojis réduisent la limite de caractères pour les SMS de 160 à 70, ce qui vous oblige souvent à utiliser davantage de segments de message (coût plus élevé) pour cet envoi. - Longueur du message
Les SMS plus courts ont également tendance à avoir plus d’engagement, mais il est utile de tester la façon dont vos abonnés réagissent aux SMS plus longs. - Langue (dans une région ou un pays donné)
En fonction de votre audience, vous souhaiterez peut-être tester la langue la plus performante pour un segment, une région ou un pays en particulier. Cela peut être utile s’il y a plusieurs langues officielles pour un pays (comme la Suisse) ou pour déterminer s’il convient d’envoyer des messages dans une langue différente à un segment ou à une région spécifique (par exemple, Montréal).
Vous devez également tester différents types de campagnes par SMS : promotion de produit, newsletter, promotions, etc. Ce qui est performant pour un type de message peut ne pas l’être pour un autre. De plus, les résultats d’une campagne peuvent être différents de ceux d’un message de flux. N’appliquez donc pas les résultats d’un test A/B à tous les messages que vous envoyez.
Avant de commencer
Klaviyo vous permet de tester soit le contenu des messages (par exemple, l’appel à l’action (CTA), les emojis et les images/GIF), soit l’horaire d’envoi.
Vous ne pouvez pas créer de test A/B lorsque la personnalisation du contenu est activée pour le message.
Pour un test d’horaire d’envoi, segmentez d’abord votre audience par localisation ou par pays. Les tests d’horaire d’envoi utilisent le fuseau horaire de votre compte ; choisissez donc des horaires adaptés aux destinataires du segment.
Sélectionnez ce segment lorsque vous choisissez les destinataires de la campagne.
Test A/B des messages SMS
Que vous souhaitiez tester le contenu du message ou les horaires d’envoi, commencez par suivre ces étapes :
- Accédez à Campagnes et cliquez sur Créer une campagne.
- Saisissez un nom de campagne, choisissez Canal unique, sélectionnez une date, et choisissez message texte.
- Cliquez sur Continue.
- Choisissez vos destinataires, puis cliquez sur Suivant.
- Dans le champ Contenu du message, rédigez votre message. Vous ne pourrez pas créer de test A/B tant que vous n’aurez pas ajouté de contenu.
- Cliquez sur Créer un test A/B pour créer une copie de votre message existant (y compris les images, les GIF, la personnalisation, etc.)

- Ensuite, choisissez ce que vous souhaitez faire :
Tester le contenu des SMS
- Cliquez sur le menu déroulant des variantes.
- Choisissez la variante que vous souhaitez modifier et tester.
- Ne modifiez qu’un élément de l’original (par exemple, si vous ajoutez une image, ne touchez pas au message).
- Cliquez sur Suivant en haut à droite pour enregistrer le message et ouvrir les paramètres du test A/B.
- Sélectionnez une stratégie de test et passez en revue vos paramètres de test A/B.
Si vous effectuez un test A/B du contenu et que vous souhaitez envoyer votre message en fonction du fuseau horaire de chaque destinataire, fixez la taille de votre test à 100 %. Lorsque vous programmez votre campagne, vous aurez la possibilité de choisir le fuseau horaire local du destinataire comme fuseau horaire pour votre envoi.
Tester les horaires d’envoi des SMS
- Le contenu du message doit être exactement identique.
- Cliquez sur Suivant en haut à droite pour enregistrer le message et ouvrir les paramètres du test A/B.
- Sous Type de test, sélectionnez Tester l’horaire d’envoi.

- Choisissez les dates et les heures auxquelles vous souhaitez effectuer le test A/B. Ces heures utilisent le fuseau horaire de votre compte.
- Passez en revue les paramètres restants ci-dessous. Les tests d’horaire d’envoi utilisent 100 % de l’audience, vous ne pouvez donc pas ajuster la taille ni la durée du test, et aucun message gagnant n’est envoyé à l’audience restante.
Sélectionner une stratégie de test
L’option de sélection d’une stratégie de test nécessite au moins 400 000 profils au total. Si vous ne voyez pas cette option, Klaviyo utilise la stratégie de test de la variante gagnante.
Si votre compte remplit les conditions requises, choisissez l’une des stratégies de test suivantes :
- Variante gagnante (test A/B standard)
- Variantes personnalisées pour chaque destinataire

Différence entre la variante gagnante et les variantes personnalisées
Pour les tests de contenu avec une taille de test inférieure à 100 %, les deux stratégies envoient des variantes à un groupe de test. Les tests SMS utilisent le taux de clics, ou le taux de commande passée pour les tests A/B standards lorsque disponible, pour mesurer la réussite. Après la période de test, chaque stratégie envoie aux destinataires restants différemment :
- Variante gagnante : l’option par défaut pour les tests A/B, qui détermine une variante gagnante et l’envoie au reste des destinataires de la campagne une fois la période de test terminée.
- Variantes personnalisées : utilise l’IA pour rechercher des tendances parmi les destinataires du test qui interagissent avec chaque variante. Une fois la période de test terminée, Klaviyo prédit quelle variante sera plus performante pour chaque destinataire et envoie au reste des destinataires leur variante préférée.
Personnalisez les variantes pour chaque destinataire
Si vous souhaitez personnaliser les variantes que chaque destinataire reçoit sur une base individuelle, sélectionnez variantes personnalisées pour chaque destinataire.
Klaviyo utilise des informations sur chaque profil pour prédire sur quelle variante il est le plus susceptible de cliquer. Ces données de profil incluent, mais sans s’y limiter, les éléments suivants :
- Taux d’engagement historiques
- Valeur vie client
- Localisation
Par exemple, si les profils du groupe de test avec une valeur vie client de 100 ou plus cliquent plus fréquemment sur la variante A, mais que les profils avec une valeur vie client de moins de 100 cliquent plus fréquemment sur la variante B, Klaviyo peut utiliser ce schéma pour choisir les variantes pour les destinataires restants. Il s’agit là d’un exemple simplifié, car Klaviyo utilise de nombreuses données pour déterminer les variantes personnalisées.
Ajuster les paramètres d’un test A/B (facultatif)
Passez en revue les paramètres de votre test :
- L’indicateur gagnant du test : taux de clics ou, pour les tests A/B standard, taux de commande lorsque votre compte dispose d’un indicateur Placed Order mappé. Les variantes SMS personnalisées utilisent le taux de clics.
- Pour les tests de contenu, le pourcentage de destinataires dans le groupe test. Les tests d’horaire d’envoi utilisent 100 %.
- Pour les tests de contenu inférieurs à 100 %, la durée du test. Si vous choisissez le taux de commande, nous recommandons au moins 24 heures.
Pour les tests de contenu inférieurs à 100 %, Klaviyo envoie la variante gagnante ou la variante personnalisée de chaque destinataire après la période de test, selon votre stratégie. Avec un test à 100 %, tout le monde reçoit une variante de test et aucun envoi du gagnant n’a lieu ultérieurement.

Passer en revue et programmer votre campagne
- Cliquez sur Suivant pour enregistrer vos paramètres de test et vérifier votre campagne. Résolvez tous les problèmes affichés dans la vérification.
- Cliquez sur Programmer ou envoyer.
- Pour un test de contenu, choisissez quand l’envoyer, et vérifiez le fuseau horaire. Cliquez sur Programmer le message pour confirmer un envoi planifié, ou sur Envoyer maintenant pour l’envoyer immédiatement.
- Pour un test d’horaire d’envoi, vérifiez les dates et les heures pour chaque variante, puis cliquez sur Programmer le message.
Ressources supplémentaires
- Best practices for A/B testing reference
Learn best practices for using Klaviyo's A/B testing features to help optimize your communication with customers.
- Understanding statistical significance in Klaviyo campaigns
Learn how to tell whether or not an A/B test is considered statically significant or not. For instance, if a campaign variation A has an open rate of 15% and variation B has an open rate of 14%, how do you know for sure if variation A or B performed better?
- How to A/B test flow branches
Learn how you can A/B test flow branches using a multi-branch split to test things like timing, discounts, and number of emails within a flow. In this article, we run through how to set up and end an A/B test for a flow branch.
- How to review your A/B test results for campaigns
Learn what data you can find on the A/B test results page and what each of these indicators mean. The information in this guide applies to both A/B testing with email campaigns and SMS campaigns.
- Mastering A/B Testing: Klaviyo’s Proven Tips & Tricks to Boost Revenue