Come rivedere i risultati dei test A/B per le campagne
Cosa imparerai
Scopri quali dati puoi trovare nella pagina dei risultati dei test A/B e cosa significa ciascuno di questi indicatori. Le informazioni in questa guida si applicano sia ai test A/B con campagne e-mail sia a campagne SMS.
I test A/B delle campagne possono fornire approfondimenti preziosi sul tuo pubblico, rendendo semplice determinare quali modifiche apportare alla tua strategia di invio. Non solo saprai qual è la variante vincente di un test A/B, ma anche altri fattori importanti, come la percentuale di attendibilità della vittoria e i dettagli della metrica vincente.
Risultati del test A/B
Per visualizzare i risultati di un test A/B:
- Vai alla campagna che stai testando.
- Seleziona la scheda Risultati del test A/B del report principale della campagna.
Panoramica del test
Nella sezione Risultati del test, vedrai un riepilogo con quanto segue:
- Variante vincente
Una volta completato un test, la variante che ha vinto. - Stato
Se il test A/B è in corso (ad esempio sta raccogliendo dati analitici) o è completato. - Probabilità di vincita
Quanto è probabile che la variante vincente abbia davvero ottenuto il tasso di apertura, il tasso di clic o il tasso di ordine più elevato, tenendo conto della casualità, e se questa probabilità è considerata statisticamente significativa. - Aumento
Di quanto la variante vincente ha ottenuto risultati migliori rispetto all’altra variante. Calcolato in base alla metrica vincente (ad esempio tasso di apertura, percentuale di clic (CR) o tasso di ordine effettuato). Per i test con 3 o più varianti, per il confronto viene utilizzato il test con le seconde migliori prestazioni. - Metrica vincente
I risultati della variante vincente per la metrica usata per il test. Ad esempio, se il tasso di apertura è stato scelto come metrica vincente, verrà mostrata la percentuale del tasso di apertura.
Sotto questi risultati, puoi esaminare i tassi di apertura, di clic e di ordine effettuato per ogni variante del test.
Come viene calcolato il lift
La percentuale di incremento è diversa dalla percentuale mostrata per la tua variante vincente. Questo perché la percentuale mostrata accanto a ciascuna variante è la percentuale di persone che hanno interagito con l'e-mail (apertura, clic, ordine effettuato), mentre il lift è la percentuale di miglioramento che la variante vincente ha ottenuto rispetto all'altra variante.
Ad esempio, se usi la percentuale di clic (CR) come metrica vincente e la variante A ha 5/100 (5%) destinatari che cliccano e la variante B ha 4/100 (4%) destinatari che cliccano, la differenza tra le varianti è di 1 clic. Ciò significa che l'incremento è stato 1/5 (20%). In altre parole, l'incremento è stato del 20%, con la variante A che ha una percentuale di clic (CR) del 5% e la variante B del 4%.
Risultati della variante personalizzata
L'opzione per scegliere una strategia di test è disponibile solo per gli account con più di 400.000 profilo totali. Se il tuo account non è idoneo, Klaviyo userà la strategia di test della variante vincente.
Se hai scelto l'opzione per personalizzare le varianti per ogni destinatario, nella pagina dei risultati del test vedrai metriche leggermente diverse, incluse le seguenti:
- Incremento totale del test A/B
Quanto la variante migliore ha avuto prestazioni migliori rispetto alla seconda migliore. Calcolato in base alla metrica vincente (ad es. tasso di apertura o percentuale di clic (CR)). - Incremento della personalizzazione
Percentuale di quanto il test personalizzato ha avuto più successo rispetto a un test A/B standard. - Percentuale di clic (CR) di personalizzazione
La percentuale di clic (CR) media tra tutte le varianti dei profili che hanno ricevuto la loro variante preferita. - Caratteristiche del profilo derivate da Klaviyo AI
Un elenco dei dati utilizzati dall'AI per determinare un pattern tra i profili che hanno preferito una variante specifica, ovvero quali fattori hanno probabilmente portato qualcuno a preferire una variante rispetto all'altra. Fai clic su ogni variante per vedere i dati utilizzati, che saranno diversi per ciascuna variante.
Capire la capacità di convincere e la significatività statistica
Ad esempio, potresti voler vedere se l'aggiunta di emoji all'oggetto influisce sul tasso di apertura del tuo elenco e-mail. Se invii il test solo a 2 iscritti e le emoji ottengono un tasso di apertura migliore, non puoi dire con certezza che il resto dell'elenco e-mail la penserà allo stesso modo. Se invece hai testato con 100 persone nel tuo elenco e-mail e hai scoperto che le emoji hanno un tasso di apertura significativamente più alto, ti sentiresti molto più sicuro che usare le emoji nell’oggetto è meglio per il tuo pubblico.
In Probabilità di vittoria, vedrai se la variante mostrata è statisticamente significativa oppure no. Se viene considerato significativo, significa che la variante ha un'elevata probabilità di vincita (ossia 90% o superiore). Un test può anche essere promettente, non conclusivo o non statisticamente significativo. Scopri di più sulla significatività statistica in Klaviyo.
Risorse aggiuntive
- Best practice per i test A/B di riferimento
Scopri le best practice per usare le funzionalità di test A/B di Klaviyo e ottimizzare la tua comunicazione con i clienti.
- Come eseguire un test A/B su un modulo d'iscrizione
Scopri come usare il test A/B per valutare le prestazioni di vari elementi dei moduli d'iscrizione. Analizzando efficacemente i risultati, puoi assicurarti che i tuoi moduli siano in sintonia con chi visita il sito e contribuiscano alla crescita della lista.
- Come eseguire un test A/B di un e-mail di flusso
Scopri come usare l’esperienza di test A/B di Klaviyo per testare singoli messaggi e-mail in un flusso, inclusi elementi come l’oggetto, gli sconti e il contenuto dell’e-mail, ecc. Puoi anche usare i test A/B per determinare se i messaggi e-mail in testo semplice offrono prestazioni migliori rispetto ai messaggi e-mail HTML ricchi di immagini.
- Come eseguire test A/B di una campagna e-mail
Scopri come impostare ed eseguire un test A/B per una campagna, come leggere i risultati del test e alcuni casi d’uso per il test A/B delle campagne. La funzionalità di test A/B di Klaviyo per le campagne ti consente di testare facilmente oggetto, contenuto del messaggio e ora di invio diversi, così puoi capire meglio cosa funziona di più per il tuo pubblico.