Come eseguire un test A/B di un e-mail di flusso
Cosa imparerai
Scopri come usare l’esperienza di test A/B di Klaviyo per testare singoli messaggi e-mail in un flusso, inclusi elementi come l’oggetto, gli sconti e il contenuto dell’e-mail, ecc. Puoi anche usare i test A/B per determinare se i messaggi e-mail in testo semplice offrono prestazioni migliori rispetto ai messaggi e-mail HTML ricchi di immagini.
Informazioni sui flussi e sui test A/B
Il test A/B delle e-mail del flusso include i processi di:
- Crea una singola e-mail del flusso e programma l’invio di questa e-mail dopo un certo numero di ore o giorni, proprio come faresti normalmente.
- Configurazione di due o più varianti di questo singolo e-mail del flusso, con la possibilità di modificare l’oggetto o il contenuto principale dell’e-mail per ciascuna variante.
- Seleziona il peso di ogni variante per stabilire la percentuale di destinatari che riceveranno ogni e-mail.
- Fare in modo che una variante vincente venga scelta automaticamente al raggiungimento della significatività statistica oppure scegliere manualmente un vincitore in base al tasso di apertura più alto o alla percentuale di clic (CR) più alta tra le varianti.
Esegui un test A/B di un'e-mail del flusso
Creare un test A/B è semplice tramite il generatore di flussi. Tieni presente che, una volta completato un test per un’e-mail, in futuro puoi creare un altro test per la stessa e-mail, se necessario.
Crea un nuovo test
- Per configurare il test A/B per una singola e-mail in qualsiasi flusso, fai clic sull'e-mail nel generatore di flussi.
- Configura il contenuto dell'e-mail, se non l'hai ancora fatto.
- Fai clic su Crea test A/B nel pannello Dettagli e-mail.
Quando crei un test A/B per un e-mail del flusso esistente, vengono create 2 nuove copie dell’e-mail. Se l’e-mail del flusso è attiva e ha già iniziato a inviare, quando il test A/B viene pubblicato le analisi per ciascuna di queste copie vengono tracciate separatamente. Non continuiamo il tracciamento delle analisi per l’e-mail originale dopo che hai aggiunto una variante.
Modifica varianti
Dopo aver creato un nuovo test, verrai indirizzato direttamente alla scheda Test A/B della finestra Gestisci contenuti . Ogni test includerà automaticamente 2 varianti. Quando fai clic su una variante, puoi modificare il nome della variante, l'oggetto, il testo di anteprima, il nome del mittente e l'indirizzo e-mail del mittente.
- Per modificare il contenuto dell’e-mail, fai clic sul pulsante Modifica e-mail sopra l’anteprima dell’e-mail sulla destra.
Aggiungi una nuova variante
Se vuoi aggiungere un'altra variante, devi clonare 1 delle 2 varianti esistenti.
- Fai clic sull’icona di clonazione a destra della variante su cui vuoi basare la nuova variante.
- In questo modo verrà creata una nuova variante che potrai modificare in modo che sia diversa dalle 2 varianti originali.
Elimina una variante
Un test A/B deve avere almeno 2 varianti, quindi una variante può essere eliminata solo quando ce ne sono 3 o più. Inoltre, le varianti possono essere eliminate solo quando un test è in stato Bozza. L'eliminazione delle varianti è disattivata per i test A/B in tempo reale.
- Per eliminare una variante, fai clic sull'icona del cestino a destra della variante che vuoi eliminare.
Scegli il peso di ogni variante
In fondo alla scheda Test A/B, vedrai la sezione Impostazioni test in cui puoi modificare il peso di ogni variante: questo stabilirà la percentuale di destinatari che riceverà ogni variante.
In genere si consiglia di ponderare ogni variante allo stesso modo, ma puoi modificare le percentuali come preferisci.
Puoi anche selezionare l’opzione per scegliere automaticamente la distribuzione. In questo modo, all’inizio la distribuzione sarà impostata in modo uguale per ciascuna variante. Nel tempo, se una delle varianti ha prestazioni migliori rispetto alle altre, Klaviyo modificherà automaticamente la distribuzione per indirizzare più destinatari alla variante con le prestazioni migliori mentre il test è ancora in corso.
Configura la selezione del vincitore
Per impostazione predefinita, i test sceglieranno automaticamente un vincitore in base alla percentuale di clic (CR), ma puoi modificarlo.
- Nella sezione Impostazioni di test in fondo alla scheda Test A/B, puoi anche configurare la selezione del vincitore facendo clic sul link Configura in Selezione del vincitore.
- Verrà visualizzata una finestra modale in cui puoi cambiare la metrica vincente in tasso di apertura.
Per le e-mail del flusso, sono disponibili come metriche vincenti solo il tasso di apertura e la percentuale di clic (CR).
Si consiglia di usare la percentuale di clic (CR), poiché molti fattori, come Apple Mail Privacy Protection (MPP), possono gonfiare i tassi di apertura. Per informazioni complete sulle aperture MPP, visita la nostra guida iOS 15: come prepararsi ai cambiamenti di Apple.
- Nella sezione Selezione automatica del vincitore sono disponibili 2 opzioni:
- Termina il test se la metrica vincente viene determinata come vincente con elevata certezza statistica (significatività statistica): questa opzione è selezionata per impostazione predefinita. Deseleziona la casella accanto a questa opzione se invece vuoi terminare manualmente il test o scegliere l’opzione per terminare il test dopo una data specifica.
- Imposta un limite di data: questa opzione ti consente di selezionare una data specifica per terminare automaticamente il test.
- Se selezioni entrambe le opzioni, il test terminerà al raggiungimento della significatività statistica o alla data specificata, a seconda di quale si verifichi per prima.
- Fai clic sul pulsante Salva impostazioni per confermare la configurazione.
Pubblica un test
- Dopo aver configurato le tue varianti, sei pronto a pubblicare il test. Dalla scheda Test A/B, fai clic sul pulsante Pubblica test in alto a destra.
- Apparirà una finestra di dialogo che ti chiederà di confermare la pubblicazione. Fai clic sul pulsante Pubblica test per confermare.
Elimina un test
- Se vuoi eliminare un test, dalla scheda Test A/B fai clic sulla freccia accanto al pulsante Pubblica test e seleziona Elimina.
Visualizza i risultati del test A/B
- Puoi visualizzare i risultati di un test mentre è in esecuzione o dopo il completamento cliccando sull'e-mail nel builder del flusso e cliccando sul pulsante Visualizza test .
Questo ti porterà alla pagina Risultati del test A/B, dove puoi visualizzare le seguenti metriche:
- Destinatari
Quante persone hanno ricevuto l'e-mail - Aperture
Quale percentuale/numero di persone ha aperto l'e-mail - Clic
Quale percentuale/numero di persone ha fatto clic nell’e-mail - Metrica di conversione
Totale dei destinatari che hanno attivato la metrica di conversione la metrica di conversione selezionata per l'e-mail, ad esempio Ordine effettuato.
Per informazioni più dettagliate sulla pagina dei risultati del test A/B, consulta il nostro articolo su come esaminare i risultati dei test A/B degli e-mail per i flussi.
Scegli manualmente un vincitore
Nella maggior parte dei casi vorrai aspettare che il test A/B scelga automaticamente un vincitore, ma potrebbe esserci una situazione in cui vuoi terminare un test A/B in anticipo. In tal caso, segui i passaggi riportati di seguito.
- Dalla pagina A/B Test Results puoi scegliere manualmente una variante vincente per il test facendo clic sul pulsante Choose Winner nell'angolo in alto a destra della pagina.
- Apparirà una finestra di dialogo che ti chiederà di scegliere un vincitore da ciascuna delle tue varianti esistenti. Seleziona la variante che vuoi far vincere dal menu a discesa, quindi fai clic sul pulsante Scegli vincitore.
La modifica dello stato di un messaggio da attivo a bozza terminerà il test e sceglierà automaticamente una vincitrice in base alla metrica vincente: verrà scelta la prima variante in caso di parità.
Risorse aggiuntive
Per saperne di più sui test A/B nei flussi:
- Come eseguire test A/B delle ramificazioni di un flusso
Scopri come puoi eseguire test A/B delle ramificazioni di un flusso utilizzando una suddivisione multi-ramificazione per testare fattori come le tempistiche, gli sconti e il numero di e-mail all'interno di un flusso. In questo articolo scopriamo come impostare e terminare un test A/B per una ramificazione del flusso.
- Best practice per i test A/B di riferimento
Scopri le best practice per usare le funzionalità di test A/B di Klaviyo e ottimizzare la tua comunicazione con i clienti.