Comment réaliser un test A/B sur un flux d’e-mails

Objectif de cet article

Apprenez à utiliser l’expérience d’A/B testing de Klaviyo pour tester des e-mails individuels dans un flux, y compris des éléments tels que l’objet, les réductions et le contenu de l’e-mail. Vous pouvez même utiliser les tests A/B pour déterminer si les e-mails en texte brut sont plus performants que les e-mails en HTML avec de nombreuses images.

À propos des flux et des tests A/B

Procédure d’A/B testing des e-mails de flux :

1. Créez un e-mail de flux et programmez son envoi après un certain nombre d’heures ou de jours, comme vous le feriez normalement.
2. Configurez deux ou plusieurs variantes d’e-mail pour cet e-mail de flux, en modifiant l’objet ou le contenu de l’e-mail pour chaque variante.
3. Sélectionnez la pondération de chaque variante pour déterminer le pourcentage de destinataires qui recevront chaque e-mail.
4. Optez pour la sélection automatique de la variante gagnante lorsque la signification statistique est atteinte ou choisissez manuellement la variante gagnante en vous basant sur les taux d’ouverture ou de clics les plus élevés.

Effectuer un test A/B sur un e-mail de flux

Le concepteur de flux permet de créer facilement un test A/B. Veuillez noter qu’une fois qu’un test a été effectué pour un e-mail, vous pouvez en créer un autre pour le même e-mail, si nécessaire.

Créer un test

1. Pour mettre en place un test A/B pour un e-mail individuel dans n’importe quel flux, cliquez sur l’e-mail dans le concepteur de flux.
2. Configurez le contenu de l’e-mail si ce n’est pas déjà fait.
3. Cliquez sur Créer un test A/B dans le panneau Détails de l’e-mail.
   

Modifier les variantes

Après avoir créé un test, vous accédez directement à l’onglet Test A/B de la fenêtre Gérer le contenu. Chaque test comprend automatiquement 2 variantes. Lorsque vous cliquez sur une variante, vous pouvez modifier son nom, son objet, son texte d’aperçu, le nom et l’adresse e-mail de l’expéditeur.

1. Pour modifier le contenu de l’e-mail, cliquez sur le bouton Modifier l’e-mail au-dessus de l’aperçu sur la droite.
   

Ajouter une nouvelle variante

Si vous souhaitez ajouter une autre variante, vous devez cloner l’une des deux variantes existantes.

1. Cliquez sur l’icône de clonage à droite de la variante que vous souhaitez utiliser comme base.
   
2. Cela crée une variante que vous pouvez modifier afin d’obtenir trois variantes différentes.
   

Supprimer une variante

Un test A/B doit comporter au moins 2 variantes, de sorte qu’une variante ne peut être supprimée que lorsqu’il y en a 3 ou plus. De plus, les variantes ne peuvent être supprimées que lorsqu’un test est à l’état de Brouillon. La suppression des variantes est désactivée pour les tests A/B actifs.

1. Pour supprimer une variante, cliquez sur l’icône de la corbeille à droite de la variante que vous souhaitez supprimer.
   

Définir la pondération de chaque variante

En bas de l’onglet Test A/B, vous verrez la section Paramètres du test où vous pouvez modifier la pondération de chaque variante. Cela permet de déterminer le pourcentage de destinataires qui recevront chaque variante.

Vous pouvez également opter pour la répartition automatique. Dans un premier temps, cette option définit la distribution de manière égale pour chaque variante. Au fil du temps, si l’une des variantes est plus performante que les autres, Klaviyo ajuste automatiquement la répartition pour diriger davantage de destinataires vers la variante la plus performante, pendant la durée du test.

Configurer la sélection de la variante gagnante

Par défaut, la variante gagnante est choisie automatiquement en fonction du taux de clics, mais cette configuration peut être modifiée.

1. Dans la section Paramètres du test, en bas de l’onglet Test A/B, vous pouvez également configurer la sélection de la variante gagnante en cliquant sur le lien Configurer sous Sélection de la variante gagnante.
   
   
   
2. Une fenêtre modale s’affiche, dans laquelle vous pouvez définir le taux d’ouverture comme indicateur de réussite.
   Pour les e-mails de flux, seuls le taux d’ouverture et le taux de clics (CR) sont disponibles en tant qu’indicateurs de réussite.
   Il est recommandé d’utiliser le taux de clics (CR), car de nombreux facteurs, tels que le système de protection de la confidentialité d’Apple Mail (MPP), peuvent engendrer une hausse des taux d’ouverture. Pour obtenir des informations complètes sur les ouvertures MPP, consultez notre guide sur la manière de se préparer aux changements d’Apple iOS 15.
   
3. Deux options s’offrent à vous dans la section Sélection automatique de la variante gagnante :
   1. Mettre fin au test si l’indicateur de réussite a atteint un niveau élevé de certitude statistique (signification statistique) : cette option est cochée par défaut. Décochez la case à côté de cette option si vous souhaitez terminer manuellement le test ou si vous choisissez de mettre fin au test après une date spécifique.
   2. Fixer une date limite : cette option vous permet de sélectionner une date spécifique à laquelle le test se terminera automatiquement.
4. Si vous sélectionnez les deux options, le test se terminera si la signification statistique est atteinte ou à la date spécifiée, selon l’éventualité qui survient en premier.
5. Cliquez sur le bouton Enregistrer les paramètres pour confirmer votre configuration.

Publier un test

1. Une fois vos variantes configurées, vous êtes prêt à publier votre test. Dans l’onglet Test A/B, cliquez sur le bouton Publier le test en haut à droite.
   
   
   
2. Une fenêtre modale s’affiche pour vous demander de confirmer la publication. Cliquez sur le bouton Publier le test pour confirmer.
   
   

Supprimer un test

1. Si vous souhaitez supprimer un test, accédez à l’onglet Test A/B, cliquez sur la flèche située à côté du bouton Publier le test et sélectionnez Supprimer.
   

Consulter les résultats d’un test A/B

1. Vous pouvez consulter les résultats d’un test actif ou terminé en cliquant sur l’e-mail dans le concepteur de flux et en cliquant sur le bouton Voir le test.
   

Vous accédez alors à la page des résultats du test A/B où vous pouvez consulter les indicateurs suivants :

• Recipients
  Combien de personnes ont reçu l’e-mail ?
• Opens
  Quel pourcentage/nombre de personnes ont ouvert l’e-mail ?
• Clicks
  Quel pourcentage/nombre de personnes ont cliqué sur le contenu de l’e-mail ?
• Conversion Metric
  Nombre total de destinataires qui ont déclenché l’indicateur de conversion sélectionné pour l’e-mail, par exemple Placed Order.

Pour plus d’informations sur la page des résultats du test A/B, consultez notre article sur l’analyse des résultats d’un test A/B sur les e-mails d’un flux.

Choisir manuellement une variante gagnante

Dans la plupart des cas, il est préférable d’attendre que votre test A/B choisisse automatiquement une variante gagnante, mais vous pouvez mettre fin à un test A/B avant son terme. Dans ce cas, suivez les étapes ci-dessous.

1. Sur la page Résultats de test A/B, vous pouvez choisir manuellement une variante gagnante pour le test en cliquant sur le bouton Choisir la variante gagnante dans le coin supérieur droit de la page.
   
   
   
2. Une fenêtre modale s’affiche pour vous demander de choisir une variante gagnante parmi vos variantes existantes. Sélectionnez la variante que vous souhaitez déclarer gagnante dans la liste déroulante, puis cliquez sur le bouton Choisir la variante gagnante.
   
   

Ressources supplémentaires

En savoir plus sur l’A/B testing de flux :

• A/B testing d’une branche de flux
• Bonnes pratiques en matière d’A/B testing