Comprendre la section Expériences
Objectif de cet article
Découvrez comment analyser facilement la réussite de vos tests A/B à l’aide de la section Expériences. La section Expériences regroupe tous les tests A/B menés dans les campagnes et les flux, et propose des insights sur les éléments testés, le canal marketing utilisé, les taux de réussite et d’autres données.
Accéder à l’onglet Expériences
Accédez à Analyse > Expériences > Tests A/B.
Une fois dans la section Expériences, vous verrez l’onglet Campagnes par défaut. Cependant, vous pouvez cliquer entre l’onglet Campagnes et l’onglet Flux pour examiner les tests A/B propres à chacun de ces canaux. Seuls les propriétaires, les administrateurs, les gestionnaires et les analystes ont accès à la section des expériences.
Seuls les propriétaires, les administrateurs, les gestionnaires et les analystes ont accès à la section des expériences.
Utiliser les options de recherche et de paramétrage
En haut de l’onglet Campagnes ou Flux, vous disposez d’options pour personnaliser l’affichage de vos tests A/B et de la possibilité de rechercher un test spécifique.
Rechercher un test
Dans le champ de recherche en haut à gauche, saisissez le nom de votre test ou un mot-clé associé à votre test (par exemple, « Testing Black Friday et Cyber Monday welcome » ou « welcome »). Une fois votre recherche saisie et la touche Entrée appuyée, votre vue se réduira à une liste de résultats correspondant à vos critères.
La fonctionnalité de recherche est propre aux onglets Campagnes et Flux, séparément. Autrement dit, vos recherches seront limitées aux résultats de chaque onglet.
Ajuster les options de paramètres
Les menus déroulants en haut de chaque onglet offrent davantage de moyens d’affiner et de personnaliser les résultats de test A/B que vous voyez, pour les campagnes ou les flux.
Les modifications des paramètres s’appliquent aux onglets Campagnes et Flux, séparément. Autrement dit, tous les choix effectués dans ces menus déroulants seront limités aux résultats de chaque onglet.
Paramètres de période
Dans le menu déroulant sous Période, vous pouvez choisir d’examiner les résultats de vos tests A/B à partir de :
- Aujourd’hui
Cela inclut tous les tests dont la date de début se situe dans la dernière journée. - 7 derniers jours
Cela inclut tous les tests dont la date de début se situe dans les 7 derniers jours. - 30 derniers jours
Cela inclut tous les tests dont la date de début se situe au cours des 30 derniers jours. - 90 derniers jours
Cela inclut tous les tests qui ont été effectués ou qui sont actuellement en cours au cours des 90 derniers jours. - Cette année
Cela inclut tous les tests dont la date de début se situe dans l’année civile en cours à ce jour. - L’année dernière
Cela inclut tous les tests dont la date de début se situe dans l’année civile précédente. Par exemple, si nous sommes actuellement en 2023, cela correspond à tous les tests dont la date de début se situe en 2022. - Depuis le début
Cela inclut tous les tests qui ont été exécutés ou qui sont actuellement en cours d’exécution.
Notez que les « All tests » dans les définitions ci-dessus incluent les tests actuellement en cours, terminés ou annulés.
Paramètres du canal marketing
Dans la liste déroulante sous Canal, vous pouvez choisir d’affiner vos résultats parmi :
- Tous
Cette option affiche les tests A/B d’e-mail et de SMS. - E-mail
Cette option affiche uniquement les tests A/B d’e-mail. - SMS
Cette option affiche uniquement les tests A/B SMS.
Paramètres des indicateurs
Dans le menu déroulant sous Indicateur gagnant, vous pouvez choisir de limiter vos résultats à ceux contenant uniquement certains indicateurs gagnants, notamment :
- Taux d’ouverture
Afficher uniquement les tests A/B utilisant le taux d’ouverture comme indicateur de réussite. - Taux de clics
N’affichez que les tests A/B utilisant le taux de clics comme indicateur de victoire. - Taux de commande
Affiche uniquement les tests A/B qui utilisent le taux de commande passée comme indicateur de réussite. - Tous
Voir toutes les options d’indicateur de victoire ensemble (taux d’ouverture,taux de clics et Commande passée).
En savoir plus sur la configuration des tests A/B pour les e-mails, les SMS ou les flux, y compris sur la mesure gagnante à utiliser pour vos besoins particuliers en matière de tests.
Paramètres de filtre
Dans la liste déroulante sous Plus de filtres, vous avez des options pour affiner davantage les types de tests spécifiques, notamment :
- Type de test (uniquement dans l’onglet Campagnes)
Dans cette liste déroulante secondaire, choisissez Tous pour voir tous les types de tests. Sinon, choisissez Test de contenu pour les tests A/B liés au contenu ou aux éléments de vos e-mails (p. ex., des tests consistant à utiliser différents textes d’aperçu et objets), ou Test de l’horaire d’envoi pour les e-mails dans lesquels vous testez le meilleur horaire d’envoi. - Statut
Dans cette liste déroulante secondaire, choisissez En cours pour n’afficher que les tests A/B actuellement en cours, ou Terminés pour afficher les tests finalisés.
Si vous souhaitez effacer l’un des résultats de recherche ou des paramètres que vous avez peut-être ajustés, cliquez sur Effacer.
Analyser les résultats des tests A/B collectés
Par défaut, les onglets Campagnes et Flux regroupent tous les tests A/B terminés, en cours d’exécution ou annulés.
Le tableau ne comportera pas de listes individuelles pour des variantes spécifiques d’un test A/B d’e-mail, de SMS ou de flux. À la place, les données de chaque campagne principale ou flux seront répertoriées. Vous pouvez cliquer sur le nom du test lui-même dans le tableau pour voir les variantes plus en détail.
Ce tableau contiendra les colonnes suivantes :
- Nom du test
Le nom réel de votre campagne. Pour les flux, il s’agira plutôt du nom de votre test. Cette colonne inclura également l’indicateur gagnant utilisé dans le test, à la fois pour les campagnes et les flux.
Notez qu’en cliquant sur le nom du test, vous serez redirigé vers la page des résultats de l’A/B testing afin de voir plus de détails sur vos variantes spécifiques, vos données et le résultat gagnant. - Canal
Le canal marketing en cours de test, soit SMS (comme indiqué par l’icône de bulle de dialogue), soit e-mail (comme indiqué par l’icône d’enveloppe).
Notez que les notifications push ne peuvent pas être testées en A/B pour le moment. - Type de test (uniquement dans l’onglet Campagnes)
Cela indiquera si le test est un test de contenu (comme l’indique l’icône de crayon) ou un test d’horaire d’envoi (comme l’indique l’icône d’horloge). - Date de début
Date à laquelle le test A/B a été initialement lancé. - Taille du test
Combien de profils ont été inclus dans le test A/B, toutes variantes confondues. - Probabilité de gain
Probabilité qu’une variante produise de meilleurs résultats en fonction de ses performances par rapport aux autres variante(s). Ce pourcentage représente l’une de ces variantes.
Notez qu’une variante de message dans un flux est considérée comme statistiquement significative lorsque chaque variante a été reçue par au moins 500 destinataires et que la variante présente une probabilité de victoire d’au moins 90 %. Une campagne est considérée comme statistiquement significative lorsque au moins 50 destinataires ont reçu chaque variante et que la variante a une probabilité de gain d’au moins 90 %. - Statut
Soit un statut vert indiquant qu’un test est terminé, soit un statut gris indiquant qu’il est encore en cours.
Par défaut, ce tableau sera trié selon le test démarré le plus récemment. Cependant, vous pouvez utiliser les flèches à côté de Nom du test, Canal, Type de test, Date de début ou Statut pour trier par ordre croissant ou décroissant dans chacune de ces colonnes.
Ressources supplémentaires
- How to A/B test an email campaign
Learn how to set up and run an A/B test for a campaign, how to read the test results, and a few use cases for A/B testing campaigns. Klaviyo's A/B testing feature for campaigns allows you to easily test different subject lines, message content, and send times so you can better understand what works best for your audience.
- How to A/B test a flow email
Learn how to use Klaviyo’s A/B testing experience to test individual emails in a flow, including things like subject line, discounts, and email content, etc. You can even use A/B tests to determine if plain-text emails perform better than image-heavy HTML emails.
- How to A/B test SMS campaigns
Learn how to A/B test SMS campaigns and what aspects to test in this article.
- Understanding statistical significance in Klaviyo campaigns
Learn how to tell whether or not an A/B test is considered statically significant or not. For instance, if a campaign variation A has an open rate of 15% and variation B has an open rate of 14%, how do you know for sure if variation A or B performed better?
- Understanding statistical significance in flows
Learn when an A/B test’s results are considered to be statistically significant in Klaviyo flows. This article will explain statistical significance for flows and when it is decided.