Comprendere la significatività statistica per i moduli di iscrizione

Imparerai

Scopra quando i risultati di un test A/B sono considerati statisticamente significativi per i moduli di iscrizione di Klaviyo. Questa guida spiegherà la significatività statistica per i moduli di iscrizione e quando viene decisa. 

Klaviyo decide quando un test A/B ha raggiunto la significatività statistica, una volta che una variante ha dimostrato matematicamente di funzionare meglio di un'altra. Può configurare un test A/B per scegliere automaticamente la variante di modulo vincente e terminare quando i risultati del test sono considerati statisticamente significativi.

I test A/B le consentono di misurare il rendimento di diversi elementi dei suoi moduli, per assicurarsi che abbiano una buona risonanza con i visitatori del suo sito e che provochino un forte coinvolgimento. È importante capire se un test può essere considerato statisticamente significativo o meno, in modo da poter analizzare efficacemente i risultati e determinare quali miglioramenti apportare. Se i risultati dei test non sono statisticamente significativi, è più difficile confermare che una particolare variazione migliorerà le prestazioni su scala.

Come Klaviyo determina la significatività statistica per i moduli

Per raggiungere la significatività statistica, il test A/B di un modulo di iscrizione deve soddisfare le seguenti condizioni:

1. Un minimo del 90% di probabilità di vincita per la variante principale.
2. Un minimo di 1.000 visualizzazioni di moduli per variazione

Per una spiegazione più dettagliata del modo in cui Klaviyo considera ciascuno di questi fattori, veda di seguito.

• Probabilità di vittoria della variazione principale
  • Questa è la probabilità che il tasso di invio dei moduli per la variante principale sia veramente più alto del tasso di invio dei moduli per tutte le altre varianti. Un'alta probabilità di vincita significa che c'è una forte evidenza che la variante principale vincerà grazie alla forma migliore, piuttosto che al caso. 
• Viste le forme
  • Un modulo deve raccogliere un ampio numero di visualizzazioni per garantire che i risultati non siano falsati da eventuali anomalie dei primi test. 

Terminare un test A/B dopo che è stata raggiunta la significatività statistica

Nell'impostazione Selezione del vincitore, può configurare il test in modo che termini automaticamente quando c'è una variazione che supera le altre a un livello statisticamente significativo, oppure quando raggiunge una data particolare. Oppure, può selezionare entrambe le caselle per terminare il test quando una delle due condizioni è soddisfatta (cioè il test raggiunge la significatività statistica o la data finale). 

In alternativa, se sceglie di terminare il test manualmente, deselezionando entrambe le caselle sotto Selezione del vincitore, dovrà monitorare i risultati in modo indipendente e scegliere manualmente sia il vincitore che la data di fine. 

Quando visualizza i risultati di un test in corso, può monitorare la probabilità di vincita e i dati attuali per ciascuna variante nel menu Panoramica della scheda Risultati del test A/B. 

Per maggiori dettagli, consulti la nostra guida sulla revisione dei risultati dei test A/B. 

Risorse aggiuntive

• Come fare il test A/B di un modulo di iscrizione
• Le migliori pratiche per i test A/B
• Comprendere l'analisi dei moduli di iscrizione