Så här granskar du dina A/B-testresultat för kampanjer

Du kommer att lära dig

Läs mer om vilka data du kan hitta på resultatsidan för A/B-test och vad var och en av dessa indikatorer betyder. Informationen i denna guide gäller både A/B-testning med e-postkampanjer och sms-kampanjer.

A/B-testning kampanjer kan ge värdefulla insikter om din målgrupp genom att göra det enkelt att avgöra vilka förändringar som ska göras i din utskicksstrategi. Du får inte bara reda på den vinnande variation för ett A/B-test, utan också andra viktiga faktorer, som vinstkonfidensprocenten och vinnande mättal-detaljer.

A/B-testresultat

För att se resultatet av ett A/B-test: 

1. Navigera till den kampanj som du ska testa.
2. Välj fliken A/B-testresultat i huvudrapporten för kampanj.
   

Testöversikt

I avsnittet Testresultat ser du en ögonblicksbild med följande:

• Vinnande variation
  När ett test har slutförts visas variation som vann. 
• Status
  Om A/B-testet är pågående (dvs. samlar in analyser) eller avslutat.
• Sannolikhet för vinst
  Hur sannolikt det är att den vinnande variation verkligen hade den högsta öppna, klickade eller placerade beställningsfrekvensen efter att ha tagit hänsyn till slumpen i Konto, och om denna sannolikhet anses vara statistiskt signifikant.
• Lyft
  Hur mycket bättre den vinnande variation presterade jämfört med den andra variation. Beräknas baserat på den vinnande mättalen (dvs. öppningsfrekvens, klickfrekvens eller placerad beställningsfrekvens). För tester med 3+ variationer används det näst bäst presterande testet som jämförelse.
• Vinnande mättal
  Den vinnande variation:s resultat för den mättal som användes för testet. Om till exempel öppningsfrekvens valdes som vinnande mättal, skulle öppningsfrekvensprocenten visas.

Under dessa resultat kan du se öppnings-, klick- och placerad beställningsfrekvens för varje variation i testet.

Hur lyftkraften beräknas

Lyftprocenten är annorlunda än den procentandel som visas för din vinst variation. Detta beror på att procentsatsen som visas bredvid varje variation är andelen personer som interagerade med e-posten (öppnade, klickade, gjorde en beställning) medan lyftet är den procentuella förbättring som vinnaren hade jämfört med de andra variation.

Om du till exempel använder klickfrekvens som din vinnande mättal och variant A har 5/100 (5%) mottagarklick och variant B har 4/100 (4%) mottagarklick, är skillnaden mellan varianterna 1 klick. Det innebär att lyftet var 1/5 (20%). Med andra ord var lyftet 20% med variation A som hade en klickfrekvens på 5% och variation B som hade en klickfrekvens på 4%.

Personliga resultat från variation

Om du valde alternativet att anpassa variationen för varje mottagare, kommer du att se något annorlunda mättal på testresultatsidan, inklusive följande:

• Totalt A/B-testlyft
  Hur mycket bättre den bästa variation presterade jämfört med den näst bästa variation. Beräknas baserat på vinnande mättal (dvs. öppningsfrekvens eller klickfrekvens).
• Personalization lift
  Procentandel av hur mycket mer framgångsrikt det personaliserade testet var jämfört med ett vanligt A/B-test.
• Personalisering klickfrekvens
  Den genomsnittliga klickfrekvensen bland alla varianter av profil som fick sin föredragna variation.
• profilegenskaper som härledsfrån Klaviyo AI
  En lista över data som används av artificiell intelligens för att fastställa ett mönster bland profiler som föredrar en viss variation, dvs. vilka faktorer som sannolikt fick någon att föredra en variation framför en annan. Klicka på varje variation för att se den data som används eftersom den skiljer sig åt per variation.

Förståelse av vinstkonfidens och statistisk signifikans

Säg till exempel att du vill se om det påverkar din öppningsfrekvens med din E-postlista om du lägger till emojis i din ämnesrad. Om du bara skickar testet till 2 prenumeranter och emojis har en bättre öppningsfrekvens, kan du inte med säkerhet säga att resten av din E-postlista kommer att känna likadant. Om du istället testade med 100 personer i din E-postlista och fann att emojis har en väsentligt högre öppningsfrekvens, skulle du känna dig mycket mer säker på att det är bättre för din publik att använda emojis i din ämnesrad.

Under Win probability kan du se om den variation som visas är statistiskt signifikant eller inte. Om det anses vara betydande betyder det att variation har en hög vinstsannolikhet (dvs. 90% eller högre). Ett test kan också vara lovande, ofullständigt eller inte statistiskt signifikant. Läs mer om statistisk signifikans i Klaviyo.

Ytterligare resurser

• Bästa praxis för A/B-testning
• Så här A/B-testar du ett registreringsformulär
• Så här A/B-testar du en individuell flöde-post
• Hur man A/B-testar en kampanj e-post