Comment réaliser un test A/B sur un formulaire d’inscription

Objectif de cet article

Découvrez comment utiliser l’A/B testing pour évaluer les performances de divers éléments de vos formulaires d’inscription. En analysant efficacement les résultats, vous pouvez vous assurer que vos formulaires suscitent l’intérêt des visiteurs de votre site et contribuent à la croissance de la liste. 

Préparer votre test A/B

Avant de commencer à créer votre test A/B, tenez compte des recommandations générales suivantes :

• Testez une variable à la fois (par exemple, une offre de code de réduction).
  • Concentrez-vous sur la modification d’une seule variable (élément) à la fois, comme un code de réduction, afin d’en évaluer clairement l’impact.
• Testez d’abord un petit nombre de variantes.
  • Lorsque vous testez une variable (par exemple, une offre de code de réduction), commencez par une ou deux variantes pour mesurer l’efficacité. Vous pourrez ensuite augmenter la complexité à mesure que vous collectez plus de données, mais n’en utilisez pas plus de quatre.
• Évitez les changements en cours de test.
  • Ne modifiez pas les paramètres du test pendant qu’il est en cours. Notez que vous ne pouvez pas modifier les variantes de formulaire elles-mêmes une fois qu’un test est en cours ; vous devez mettre fin au test pour effectuer ce type de modifications, c’est pourquoi vous devez confirmer toutes les configurations au préalable. 
• Prévoyez une durée d’essai importante.
  • Attendez que les résultats soient statistiquement significatifs ou que vous disposiez d’un échantillon d’utilisateurs suffisamment important pour mettre fin à votre test. N’oubliez pas qu’un plus grand nombre de variantes nécessite un plus grand trafic pour obtenir des résultats fiables. 
• Comprenez la signification statistique.
  • Familiarisez-vous avec l’impact de la signification statistique sur les résultats d’un test A/B.

Quels tests A/B effectuer ?

Création d’un test A/B

Création d’un test

Il existe deux méthodes pour créer un test A/B de votre formulaire d’inscription :

• Dans l’onglet Formulaires d’inscription, cliquez sur le menu déroulant « … » situé à côté du formulaire que vous souhaitez tester et sélectionnez Créer un test A/B.
• Ouvrez l’éditeur du formulaire d’inscription que vous souhaitez tester et sélectionnez Créer un test A/B dans le coin supérieur. 

Quelle que soit la méthode utilisée :

1. Sélectionnez Créer un test A/B pour commencer.
   
2. Ensuite, donnez un nom explicite à votre test. Si vous testez les couleurs des boutons de la fenêtre contextuelle de votre newsletter, vous pouvez nommer le test Newsletter - Couleur du bouton d’envoi.
3. Puis, donnez des noms différents aux variantes de votre formulaire d’inscription en sélectionnant l’icône en forme de crayon à côté du nom actuel de votre formulaire.
   • Par défaut, il porte le nom Copie n° du nom du formulaire. En reprenant l’exemple précédent, vous pouvez nommer vos formulaires Newsletter - Bleu et Newsletter - Gris.
   • Ici, vous pouvez ajouter jusqu’à 7 variantes à votre test A/B. N’oubliez pas que plus vous ajoutez de variantes, plus vous aurez besoin de temps pour exécuter votre test. Un test A/B idéal comporte entre deux et quatre variantes. L’exemple ci-dessous comporte trois variantes : le formulaire d’origine et deux tests.
4. Après avoir configuré votre test, sélectionnez Créer le test.

Configuration des variantes

Après avoir créé votre test, vous êtes redirigé vers l’éditeur de formulaire d’inscription. Vous pouvez passer d’une variante à l’autre en sélectionnant le nom de votre formulaire. À partir de ce menu, vous pouvez également choisir de modifier le nom d’une variante, d’en créer une autre ou d’en supprimer une.

Consultez la section « Quels tests A/B effectuer ? » pour trouver des idées.

Une fois la configuration de votre formulaire terminée, sélectionnez Passer aux paramètres du test.

Configuration des paramètres des tests A/B

Vous pouvez accéder à la page des paramètres de test de deux manières différentes :

• Cliquez sur le bouton Passer aux paramètres du test dans l’éditeur du formulaire d’inscription.
• Sélectionnez votre formulaire sur la page des formulaires d’inscription, puis accédez à Résultats de test A/B > Modifier le test. Les paramètres personnalisables de votre test apparaissent ici. Pensez à personnaliser les éléments suivants :
  • Noms des variantes
  • Sélection du trafic (pondération)
  • Sélection de la variante gagnante
  • Notes

Sélection du trafic

Dans cette section, vous pouvez déterminer la quantité de trafic vers les variantes de votre formulaire. Par défaut, chaque formulaire est présenté à un nombre égal d’utilisateurs. Au cours de votre test, si l’une de vos variantes est plus performante que les autres, Klaviyo dirigera le trafic vers le formulaire le plus performant.

Si vous choisissez l’option Pondération (manuelle), vous pouvez spécifier la quantité de trafic que vous souhaitez diriger vers chaque variante du formulaire. La somme des montants doit être égale à 100 %.

Sélection de la variante gagnante

Comme pour la sélection du trafic, vous avez deux manières de choisir la variante gagnante du test. Vous pouvez mettre fin au test automatiquement ou manuellement.

• Automatiquement
  Si vous mettez fin à votre test automatiquement, il se terminera lorsqu’une variante obtiendra de meilleurs résultats que les autres à un niveau statistiquement significatif ou dès que le test atteindra une date donnée. Vous pouvez également cocher les deux cases pour que le test s’achève lorsque l’une des conditions est remplie. Par exemple, si vous avez sélectionné les deux conditions et que votre formulaire est testé pendant un mois, le test prendra fin si le formulaire présente des résultats statistiquement significatifs au bout d’une semaine.
  • Si vous mettez fin à votre test dès que les résultats sont statistiquement significatifs, le modèle de science des données de Klaviyo calculera la variante gagnante.
  • Si vous choisissez de mettre fin au test à une date donnée, le test se terminera à minuit selon le fuseau horaire UTC.
• Manuellement
  Si vous décidez de mettre fin à votre test manuellement (en décochant les deux cases), vous choisirez à la fois la variante gagnante et la date de fin du test. 

Quelle que soit la sélection automatique que vous choisissez, une fois le test terminé, le formulaire gagnant sera mis en ligne sur votre site.

Sélectionnez Publier le test A/B lorsque vous avez fini de modifier les paramètres de votre test. Avant de lancer votre test, Klaviyo vérifie s’il y a un problème de publication de formulaires sur votre site et si votre formulaire dispose de tout le contenu dont il a besoin (par exemple, message de consentement, CTA, champs de soumission, etc.).

Analyser les résultats des tests A/B

Pendant l’exécution du test A/B ou une fois celui-ci terminé, vous pouvez suivre les données dans votre compte. Accédez à Formulaires d’inscription, puis sélectionnez votre formulaire. Dans l’onglet Vue d’ensemble, vous pouvez voir les performances globales de votre formulaire. Sélectionnez l’onglet Résultats de test A/B pour analyser en détail les résultats de votre test A/B.

Depuis cette page, vous pouvez également modifier les paramètres de votre test A/B. Pour cela, sélectionnez Modifier le test A/B dans le coin supérieur droit de l’onglet des résultats du test A/B. Vous pourrez alors modifier les paramètres du test (nom, pondération de la variante, paramètres de sélection de la variante gagnante).

Vous ne pouvez pas modifier le contenu des formulaires testés pendant la durée du test. Pour pouvoir le faire, cliquez sur Modifier le contenu pour mettre fin au test, cloner un nouveau test et recommencer.

Aperçu du test

Sous Aperçu, vous disposez d’un aperçu des performances de votre test. Vous pouvez utiliser la liste déroulante dans le coin supérieur gauche pour consulter les différentes variantes de votre test A/B. Voici les indicateurs présentés dans la section Vue d’ensemble :

• Probabilité d’être la variante gagnante
  La probabilité de victoire s’affiche dans la carte en haut à gauche. Ce pourcentage indique la probabilité que la variante actuellement gagnante soit la gagnante statistiquement significative. Au fur et à mesure que le nombre de spectateurs augmente et que la durée du test s’allonge, ce chiffre devrait augmenter. Lorsque les résultats du test deviennent statistiquement significatifs, un libellé apparaît en dessous de la probabilité de victoire. Dès qu’un test est terminé, le motif de sa clôture est indiqué (par exemple, la désignation manuelle d’une variante gagnante).
• Date de début et Date de fin
  Les dates de début et de fin du test sont indiquées dans la carte en haut à droite. Si vous n’avez pas défini de date de fin, celle-ci sera laissée vide. Lorsque le test est terminé, vous voyez la date à laquelle la variante gagnante a été sélectionnée.

  Pour arrêter manuellement le test et choisir une variante gagnante à tout moment, sélectionnez Choisir la variante gagnante. En sélectionnant ce bouton, vous pouvez à tout moment mettre fin au test et faire passer la variante gagnante de votre formulaire au statut « Actif » ou « Brouillon ».

Sous ces cartes, les données brutes de chaque variante de formulaire de votre test sont affichées. À côté de chaque variante, les indicateurs suivants sont détaillés :

• Pondération actuelle
  Cet indicateur reflète la pondération actuelle du trafic dirigé vers chaque formulaire. Si vous avez sélectionné manuellement le volume de trafic dirigé vers chaque formulaire, ces chiffres correspondent aux paramètres que vous avez sélectionnés lorsque vous avez lancé le test. Si vous utilisez le modèle de science des données de Klaviyo, la pondération du trafic évoluera au fil du temps, de façon à orienter davantage de trafic vers le formulaire gagnant et à vous permettre de gagner plus d’abonnés au fur et à mesure de l’exécution de votre test.
• Commandes
  Nombre de commandes passées attribuées à ce formulaire.
• Valeur moyenne de la commande (AOV)
  Chiffre d’affaires de la boutique associé à ce formulaire divisé par le nombre de commandes associées au formulaire.
• Chiffre d’affaires
  Somme des commandes passées (en dollars) après l’envoi d’un formulaire dans la fenêtre de conversion.
  

  Pour en savoir plus sur la façon dont le chiffre d’affaires est lié au formulaire d’inscription, consultez la section Comprendre les indicateurs de chiffre d’affaires pour les formulaires.

• Vues uniques
  Le nombre d’utilisateurs uniques qui ont consulté une variante du formulaire d’inscription (par exemple, si un visiteur du site consulte votre formulaire deux fois, une vue est comptabilisée).
• Envois uniques
  Nombre d’utilisateurs uniques qui envoient une variante du formulaire d’inscription ou qui cliquent sur un bouton « Accéder à l’URL » (par exemple, si un visiteur du site envoie votre formulaire deux fois, un seul envoi est comptabilisé). Si le formulaire comporte à la fois un bouton d’envoi et un bouton « Accéder à l’URL », l’événement n’est comptabilisé que lorsque le formulaire est envoyé.
• Taux de complétion
  Nombre d’envois uniques de formulaires divisé par le nombre de vues uniques. Comme ce taux utilise des indicateurs uniques, il est différent du taux de complétion de l’onglet Vue d’ensemble, qui utilise des totaux.

Graphique de taux de complétion formulaire

Sous les données brutes se trouve un graphique de vos variantes, qui indique le Taux de complétion de formulaire par variante pendant la durée du test A/B. Pour consulter les données d’une date particulière, survolez les points de données pour obtenir plus d’informations.

Taux d’engagement

Si vous réalisez un test A/B sur un formulaire à plusieurs étapes, les taux d’engagement pour chaque étape du formulaire sont répartis par variante, ce qui vous permet de comprendre où les visiteurs du site sont susceptibles d’abandonner le formulaire. Vous pouvez analyser les éléments suivants :

• Taux d’engagement de l’étape 1
  Cet indicateur reflète le pourcentage d’utilisateurs qui ont interagi avec la première étape de la variante du formulaire d’inscription.
• Utilisateurs qui ont franchi toutes les étapes
  Cet indicateur reflète le pourcentage d’utilisateurs qui ont interagi avec chaque étape de la variante du formulaire d’inscription. 

Sous ces données se trouve un graphique Taux d’achèvement des étapes par variante, qui vous permet de visualiser les taux d’engagement par étape et de comparer les taux entre les variantes de formulaire du test A/B.

FAQ

J’ai reçu une notification indiquant que, pour un formulaire sur lequel je teste le délai d’affichage, le taux de complétion formulaire est calculé différemment. Comment cela se fait-il ?

Si vous testez un délai sur votre formulaire, votre taux de complétion formulaire sera calculé sur la base des conversions des utilisateurs uniques éligibles (Vues uniques éligibles), plutôt que sur la base du nombre de vues totales du formulaire.

Supposons, par exemple, que la pondération de votre test A/B est uniforme et que le message est : « Besoin d’aide dans vos recherches ? ». Dans le cadre du test, un formulaire s’affiche dès que quelqu’un visite votre site, et l’autre apparaît au bout d’une minute. Bien que le même nombre de personnes soit susceptible de voir les deux formulaires, plus de personnes verront celui qui s’affiche immédiatement. Même si le nombre de personnes qui voient le formulaire différé est moins important, il aide les acheteurs hésitants et le taux de complétion formulaire peut donc être plus élevé. Pour vérifier si le délai d’affichage du formulaire entraîne un taux de complétion plus élevé ou plus faible, le taux de complétion du formulaire n’est pas calculé en pourcentage du nombre de vues, mais plutôt en pourcentage du nombre de personnes qui auraient pu voir le formulaire.

J’ai coché les deux cases pour la partie Sélection de la variante gagnante de mon test A/B. Le test se terminera-t-il lorsque les deux conditions sont remplies ou l’une d’entre elles ?

Ces cases à cocher fonctionnent comme une condition OU, ce qui signifie que dès que l’une ou l’autre des conditions est remplie, le test s’arrête. Il n’est pas nécessaire que les deux conditions soient remplies.

Puis-je modifier les paramètres de mon test A/B de formulaire une fois lancé ?

Oui, cliquez sur votre test A/B à partir de votre formulaire et sélectionnez Modifier le test A/B pour modifier les paramètres. Cependant, vous ne pourrez pas modifier le contenu des formulaires sans mettre fin à votre test en cours et en commencer un nouveau.

Si quelqu’un n’interagit pas avec un formulaire qui fait partie d’un test A/B, verra-t-il une version différente du formulaire lorsqu’il le verra une deuxième fois ?

Non, cette personne sera suivie par des cookies lorsqu’elle verra le formulaire la première fois et verra uniquement cette variante, à moins qu’elle n’efface ses cookies ou qu’elle ne passe par une navigation privée.

Lorsque je crée un test A/B pour mon formulaire, celui-ci passe-t-il au statut de brouillon ?

Le formulaire reste au statut où il se trouve avant la création du test. S’il était au statut « Actif » et que vous créez un test A/B, la version actuelle sera au statut « Actif ». S’il était au statut de brouillon, le formulaire sera au statut de brouillon.

J’ai fait une faute de frappe dans le test A/B de mon formulaire, j’en ai donc publié un nouveau. Comment puis-je supprimer définitivement le test avec la faute de frappe ?

Accédez aux résultats du test que vous souhaitez supprimer en sélectionnant le formulaire et en vous rendant dans les paramètres du test A/B, puis en choisissant Supprimer le test.

J’ai mis en ligne le test A/B de mon formulaire, puis je me suis rendu compte qu’il y avait une faute de frappe. Je ne veux pas arrêter le test, le recréer et le remettre en ligne. Que dois-je faire ?

Accédez à la page des paramètres du test A/B pendant que le test est en cours en cliquant sur Modifier le test A/B depuis l’analyse du formulaire, puis cliquez sur Modifier le contenu. Cela crée un brouillon de test A/B auquel vous pouvez apporter les modifications nécessaires. Ensuite, publiez-le en cliquant sur Publier le test A/B.

L’une de mes variantes de formulaire est très peu performante et je souhaite mettre à jour la quantité de trafic dirigée vers ce formulaire. Est-ce possible ?

Oui. Cliquez sur votre formulaire et accédez aux paramètres du test A/B. Sélectionnez Modifier le test A/B et modifiez la pondération ou activez la pondération automatique pour que le modèle tienne compte des performances.

Je veux tester différentes offres pour voir lesquelles génèrent le plus de conversions. Comment puis-je m’assurer de proposer une série de bienvenue différente associée à chaque formulaire ?

Vous pouvez ajuster la liste à laquelle une personne envoie son formulaire pour chaque variante. Pour que chaque variante soit associée à des listes différentes, cliquez sur votre bouton CTA dans le formulaire et modifiez la Liste à envoyer dans la section Action du clic sur le bouton. À partir de là, déclenchez votre flux de série de bienvenue en fonction de l’adhésion d’une personne à la liste de chaque variante et faites un suivi avec l’offre associée.

Je souhaite suivre les personnes qui voient chaque variante de formulaire du test A/B. Comment faire ?

Il y a deux façons de procéder. Vous pouvez ajuster la liste à laquelle une personne envoie son formulaire ou ajouter un champ masqué qui est soumis lorsque quelqu’un clique sur votre formulaire. Si vous souhaitez que les différentes variantes soient envoyées à des listes différentes, sélectionnez le bouton et modifiez le paramètre Liste à envoyer dans la section Action du clic sur le bouton. Si vous souhaitez que la soumission se fasse par l’intermédiaire d’un champ masqué, vous devez ajouter une propriété dans la section Envoyer les champs masqués. Créez ensuite un segment basé sur chaque propriété.

Ressources supplémentaires

• Guide pratique de l’A/B testing
• Formation sur la création d’une stratégie d’acquisition efficace à l’aide de formulaires d’inscription
• Démarrer avec les formulaires d’inscription
• Formation : certification produit Klaviyo