Comprendre la signification statistique pour les formulaires d’inscription

Objectif de cet article

Découvrez quand les résultats d’un test A/B sont considérés comme statistiquement significatifs pour les formulaires d’inscription Klaviyo. Ce guide explique la signification statistique pour les formulaires d’inscription et à quel moment elle est déterminée.

Klaviyo considère qu’un test A/B est statistiquement significatif lorsqu’il existe des preuves statistiques solides qu’une variante présente un taux de complétion formulaire plus élevé que les autres. Vous pouvez configurer un test A/B pour choisir automatiquement la variante de formulaire gagnante et se terminer une fois que les résultats du test sont considérés comme statistiquement significatifs.

Les tests A/B vous permettent de mesurer les performances de différents éléments de vos formulaires afin de vous assurer qu’ils trouvent un écho auprès des visiteurs de votre site et génèrent un engagement élevé. Il est important de comprendre si un test peut ou non être considéré comme statistiquement significatif, afin que vous puissiez analyser efficacement les résultats et déterminer les améliorations à apporter. Si les résultats du test ne sont pas statistiquement significatifs, il est alors plus difficile de confirmer qu’une variante particulière améliorera les performances à grande échelle.

Comment Klaviyo détermine la significativité statistique pour les formulaires

Klaviyo prend en compte la probabilité de gain et les affichages du formulaire, ainsi que des vérifications supplémentaires, pour déterminer si le test A/B d’un formulaire d’inscription est statistiquement significatif :

1. Une probabilité de victoire supérieure à 90 % pour la variante principale
2. Plus de 1 000 affichages de formulaire par variante

Ces seuils, à eux seuls, ne suffisent pas. Klaviyo exige également au moins 10 envois de formulaire sur l’ensemble des variantes et vérifie que la plage estimée des taux de complétion formulaire pour la variante principale se chevauche très peu avec celles des autres variantes.

• Probabilité de gain de la variante principale
  • Il s’agit de la probabilité que le taux de complétion formulaire pour la variante en tête soit réellement supérieur au taux de complétion formulaire pour toutes les autres variantes. Une probabilité de gain élevée signifie qu’il existe des preuves solides que la variante en tête va gagner parce que le formulaire est meilleur, et non en raison du hasard.
• Vues du formulaire
  • Un formulaire doit recueillir un nombre suffisant de vues afin de réduire l’effet des anomalies lors des premiers tests. Les nouveaux tests A/B comptabilisent les visiteurs uniques. Ainsi, un visiteur qui consulte la même variante plus d’une fois compte pour 1 vue. Pour les tests qui comparent le moment d’affichage, Klaviyo comptabilise les visiteurs éligibles pour voir chaque variante, y compris ceux qui partent avant l’apparition du formulaire.

Surveiller et mettre fin à un test A/B

Sur la page Paramètres du test A/B, sous Sélection du gagnant, sélectionnez Mettre fin automatiquement au test lorsque la significativité statistique est atteinte, Définir une date de fin, ou les deux. Si vous sélectionnez les deux, le test se termine lorsque l’une ou l’autre des conditions est remplie.

Si la date de fin arrive avant que la signification statistique ne soit atteinte, Klaviyo choisit la variante avec le taux de complétion formulaire le plus élevé à ce moment-là. Avec l’une ou l’autre option de fin automatique, Klaviyo met en ligne la variante gagnante. Un gagnant sélectionné automatiquement n’est pas nécessairement statistiquement significatif.

Sinon, décochez les deux cases sous Sélection du gagnant afin de laisser le test s’exécuter jusqu’à ce que vous y mettiez fin manuellement. Vous décidez quand mettre fin au test et quelle variante utiliser.

Pour surveiller un test en cours :

1. Accédez à Formulaires d’inscription, ouvrez le menu à 3 points du formulaire, puis sélectionnez Analyses.
2. Sélectionnez Résultats des tests A/B, puis choisissez le test dans la liste déroulante.
3. Dans la section Aperçu, consultez la probabilité de gagner et les données pour chaque variante. Vérifiez le libellé sous la probabilité : Statistiquement significatif confirme que le test répond aux vérifications de significativité. Une probabilité de gagner élevée, à elle seule, ne le confirme pas.

Pour mettre fin manuellement à un test en cours :

1. Dans la section Aperçu du test, cliquez sur Choisir le gagnant.
2. Sélectionnez la variante gagnante, puis choisissez Mettre fin au test et publier la variante sélectionnée ou Mettre fin au test et mettre la variante sélectionnée en brouillon. Choisir le brouillon retire le formulaire de votre site.
3. Cliquez sur Choisir le gagnant pour mettre fin au test et appliquer votre sélection.

Pour plus de détails, consultez notre guide sur l’examen des résultats de tests A/B.

Ressources supplémentaires