Comment réaliser un test A/B sur une campagne par e-mail

Objectif de cet article

Découvrez comment configurer et exécuter un test A/B pour une campagne, apprenez à lire les résultats du test et examinez quelques cas d’utilisation de l’A/B testing dans le cadre des campagnes. La fonctionnalité d’A/B testing de Klaviyo pour les campagnes vous permet de tester facilement différents objets, contenus de message et horaires d’envoi afin d’identifier ce qui fonctionne le mieux pour votre audience.

Comment réaliser un test A/B sur des e-mails de campagne

1. Accédez à Campagnes > Créer une campagne.
2. Dans la barre latérale, sélectionnez E-mail.
3. Donnez un nom à votre campagne et cliquez sur Continuer.
4. Sélectionnez les listes ou segments auxquels vous souhaitez envoyer votre message.
5. Cliquez sur Suivant.
6. Saisissez l’objet et, si besoin, modifiez l’aperçu du texte ainsi que le nom et l’adresse e-mail de l’expéditeur.
7. Créez une première version de votre e-mail en ajoutant votre texte, vos images et vos liens.
8. Au-dessus du champ de l’objet, cliquez sur Créer un test A/B. Une variante identique de votre campagne est automatiquement créée et la page Test A/B de la campagne apparaît.
   
9. Dans chaque champ Nom de la variante, ajoutez un nom descriptif qui fait référence à l’élément testé, par exemple « E-mail de lancement de l’été - boutons blancs ».
   

Automatiser l’A/B testing grâce à l’IA

Au lieu de créer un test manuellement, vous pouvez aussi automatiser sa création à l’aide de l’IA. Cette fonctionnalité permet notamment de tester les objets.

1. Créez une campagne par e-mail en suivant les étapes de la section précédente.
2. Choisissez un modèle et modifiez le contenu de l’e-mail.
3. Sous le champ Objet, choisissez l’une des options de la section Générer une variante pour un test A/B.
   

Une fois l’option choisie, l’IA crée un test avec 2 variantes utilisant des titres différents mais similaires, notamment votre titre d’origine pour la variante A et un titre généré par l’IA en fonction de la requête sélectionnée pour la variante B.

Les options disponibles dépendent de l’objet que vous avez saisi, mais voici quelques exemples :

• Personnalisation ou pas de personnalisation
  La variante B inclut le prénom du client dans l’objet ou supprime son nom s’il était indiqué à l’origine.
• Court ou long
  Selon la longueur de votre objet d’origine, l’objet de la variante B est plus court ou plus long.
• Question ou déclaration
  La variante B convertit votre objet d’origine en question ou en déclaration s’il s’agissait d’une question.
• Emoji ou pas d’emoji
  La variante B inclut un emoji pertinent dans l’objet ou supprime tous les emojis inclus à l’origine.

Lisez la suite de cet article pour savoir comment modifier davantage votre test A/B et comment l’envoyer.

Tester le contenu

Vous pouvez tester le contenu des messages pour comprendre les préférences de votre audience. Cliquez sur Tester le contenu en haut de la page.

Modifiez l’une des variantes de votre test A/B. Il est essentiel que chaque test ne porte que sur un élément. Par conséquent, si vous modifiez l’objet, ne changez rien d’autre.

Cloner une variante

Si vous le souhaitez, vous pouvez ajouter d’autres variantes en cliquant sur le bouton Cloner de la carte que vous souhaitez dupliquer, mais il est préférable de n’utiliser que 2 variantes.

Tester l’horaire d’envoi

Vous pouvez également tester les horaires d’envoi pour déterminer à quel moment votre audience souhaite recevoir vos messages. Cliquez sur Tester l’horaire d’envoi en haut de la page.

Lorsque vous testez les horaires d’envoi, veillez à ce que le contenu et l’objet des deux variantes soient strictement identiques.

Si vous ne savez pas par où commencer, nous vous recommandons d’essayer un envoi en fin de journée. Par ailleurs, si vous remplissez les conditions requises, vous pouvez utiliser la fonctionnalité Smart Send Time à la place.

Sélectionner une stratégie de test

Si votre compte remplit les conditions requises, choisissez l’une des stratégies de test suivantes :

• Variante gagnante (test A/B standard)
• Variantes personnalisées pour chaque destinataire

Différence entre la variante gagnante et les variantes personnalisées

Les deux options de stratégie de test envoient des variantes à un groupe de test composé d’un pourcentage de l’ensemble des destinataires de la campagne et testent le succès du message sur la base de l’indicateur que vous avez choisi (par exemple, le taux d’ouverture). Cependant, il existe quelques différences essentielles dans l’envoi des messages au reste des destinataires à l’issue de la période de test :

• Variante gagnante : l’option par défaut pour les tests A/B, qui détermine une variante gagnante et l’envoie au reste des destinataires de la campagne une fois la période de test terminée.
• Variantes personnalisées : utilise l’IA pour rechercher des tendances parmi les destinataires du test qui interagissent avec chaque variante. Une fois la période de test terminée, Klaviyo prédit quelle variante sera plus performante pour chaque destinataire et envoie au reste des destinataires leur variante préférée.

Personnaliser les variantes pour chaque destinataire

Si vous souhaitez personnaliser la variante que chaque destinataire reçoit, sélectionnez Variantes personnalisées pour chaque destinataire.

Klaviyo exploitera les données de chaque profil pour déterminer la variante la plus susceptible de parvenir à convertir ce client. Ces données de profil incluent, mais sans s’y limiter, les éléments suivants :

• Taux d’engagement historiques
• Valeur vie client (CLV)
• Localisation

Par exemple, si vous avez choisi le taux d’ouverture comme indicateur de réussite et que les profils du groupe de test avec une valeur vie client de 100 ou plus ouvrent plus fréquemment la variante A, mais que les profils avec une valeur vie client de moins de 100 ouvrent plus fréquemment la variante B, le reste des destinataires de la campagne recevront des e-mails en fonction de la variante qu’ils sont le plus susceptibles d’ouvrir au vu de leur valeur vie client. Il s’agit là d’un exemple simplifié, car Klaviyo se base sur de nombreuses données pour déterminer les variantes personnalisées.

Configuration des paramètres des tests A/B

Une fois que votre contenu est prêt, décidez de la taille de votre groupe de test et de sa durée.

Tout d’abord, choisissez l’indicateur gagnant, à savoir ce que vous souhaitez améliorer. Vous pouvez faire votre choix parmi les options suivantes :

• Taux d’ouverture
  Idéal pour tester l’objet, l’aperçu du texte ou le nom et l’adresse e-mail de l’expéditeur.
• Taux de clics
  Le meilleur choix pour tester le contenu des e-mails, comme la taille ou la couleur des boutons.
• Taux de commandes passées
  Uniquement disponible pour les comptes disposant d’un indicateur Placed Order. Cette option n’est pas utilisable pour les variations personnalisées. Cet indicateur est recommandé pour tester le contenu des e-mails, par exemple pour déterminer si l’affichage des produits les plus vendus ou des nouveautés génère davantage de conversions.

Nous recommandons de baser la taille du groupe de test sur la taille de votre liste et de choisir une durée basée sur l’indicateur que vous souhaitez améliorer (c’est-à-dire les ouvertures, les clics ou les commandes passées). Utilisez le curseur pour modifier la taille du groupe de test si vous le souhaitez. Si cette valeur est inférieure à 100 %, vous avez également la possibilité d’ajuster la durée du test.

Dans l’exemple ci-dessous, 20 % des destinataires de la campagne recevront la variante A et 20 % la variante B. En fonction du nombre de destinataires qui ouvrent le message, cliquent sur un lien ou passent commande (selon l’indicateur gagnant que vous avez choisi), la variante gagnante sera désignée au bout de 6 heures et envoyée au reste des destinataires. 

Après avoir ajusté les paramètres du test, cliquez sur Vue d’ensemble avant envoi.

Si vous effectuez des tests A/B et que vous souhaitez envoyer votre message en fonction du fuseau horaire de chaque destinataire, voici la procédure à suivre :

1. Réglez la taille de votre groupe de test sur 100 %.
   
2. Ensuite, lorsque vous programmez votre campagne, vous avez la possibilité de choisir le fuseau horaire local du destinataire pour l’envoi.
   

Tests A/B recommandés

Vous ne devez tester qu’une seule variable à la fois. En testant plusieurs variables simultanément, il peut être difficile (voire impossible) d’identifier celles qui contribuent à l’amélioration des performances. Vous ne savez pas quoi tester ? Cliquez sur les sections ci-dessous pour avoir quelques points de départ.

Analyse des résultats du test A/B et sélection du gagnant (facultatif)

Accédez à la campagne que vous testez pour voir son évolution et identifier la variante la plus performante. Pour mettre fin à un test A/B en cours :

1. Accédez à l’onglet Résultats de test A/B d’une campagne en cours.
2. Cliquez sur le menu des options supplémentaires à côté de la version que vous souhaitez déclarer gagnante.
3. Cliquez sur Choisir comme variante gagnante.

Lorsque vous sélectionnez manuellement une variante gagnante, toute personne n’ayant pas encore reçu la campagne recevra immédiatement cette variante. Si votre test A/B portait sur 100 % des destinataires, nous continuerons à collecter des données tout au long de la fenêtre de conversion du message, de sorte que la variante gagnante pourra changer ensuite, au regard des nouvelles données. Pour en savoir plus, consultez l’article sur l’analyse des résultats de vos tests A/B pour les campagnes par e-mail.

Ressources supplémentaires

Ressources supplémentaires

• Bonnes pratiques en matière d’A/B testing
• Comment réaliser un test A/B sur un flux d’e-mails
• Comment effectuer un test A/B sur une campagne par SMS
• Comment renvoyer une campagne qui a dépassé les limites d’envoi du compte
• Maîtriser l’A/B testing pour les e-mails : conseils et astuces infaillibles de Klaviyo pour booster votre chiffre d’affaires