Så granskar du resultaten för ditt A/B-test för kampanjer
Du kommer att lära dig
Läs mer om vilka data du kan hitta på resultatsidan för A/B-testet och vad var och en av dessa indikatorer innebär. Informationen i den här guiden gäller både A/B-testning med e-postkampanjer och sms-kampanjer.
A/B-testning av kampanjer kan ge värdefulla insikter om din målgrupp genom att göra det enkelt att avgöra vilka ändringar du ska göra i din utskicksstrategi. Du får inte bara reda på vilken variation som vinner i ett A/B-test, utan även andra viktiga faktorer, som vinstsäkerhetsprocenten och detaljer om det vinnande mättalet.
A/B-testresultat
Så här ser du resultaten av ett A/B-test:
- Navigera till kampanjen som du testar.
- Välj fliken A/B-testresultat i kampanjrapportens huvudrapport.
Testöversikt
I avsnittet Testresultat ser du en översikt med följande:
- Vinnande variation
När ett test är slutfört är det variationen som vann. - Status
Om A/B-testet pågår (dvs. samlar in analysdata) eller är slutfört. - Sannolikhet att vinna
Hur sannolikt det är att vinnarvariationen verkligen hade den högsta öppnings-, klick- eller beställningsfrekvensen när slumpen har tagits med i beräkningen, och om den här sannolikheten anses vara statistiskt signifikant. - Ökning
Hur mycket bättre den vinnande varianten presterade jämfört med den andra varianten. Beräknas baserat på det vinnande mättalet (dvs. öppningsfrekvens, klickfrekvens (CR) eller beställningsfrekvens). För tester med 3+ variationer används den näst bäst presterande testet för jämförelse. - Vinnande mättal
Den vinnande variationens resultat för det mättal som användes för testet. Om till exempel öppningsfrekvens valdes som vinnande mättal visas procentandelen för öppningsfrekvensen.
Under de här resultaten kan du granska öppnings-, klick- och beställningsfrekvens för varje variation i testet.
Hur lift beräknas
Lyftprocenten skiljer sig från procentandelen som visas för din vinnande variation. Det beror på att procentandelen som visas bredvid varje variation är andelen personer som interagerade med e-postmeddelandet (öppnade, klickade, lade en beställning), medan lyftet är förbättringsprocenten som vinnaren hade jämfört med den andra variationen.
Om du till exempel använder klickfrekvens (CR) som ditt vinnande mättal och variation A har 5/100 (5 %) mottagare som klickar och variation B har 4/100 (4 %) mottagare som klickar är skillnaden mellan variationerna 1 klick. Det betyder att ökningen var 1/5 (20 %). Med andra ord var ökningen 20 % med variation A som hade en klickfrekvens (CR) på 5 % och variation B på 4 %.
Resultat för personaliserade variationer
Alternativet för att välja en teststrategi är bara tillgängligt för Konton med fler än 400 000 profiler totalt. Om ditt Konto inte är kvalificerat kommer Klaviyo att använda teststrategin med vinnande variation.
Om du valde alternativet att anpassa variationer för varje mottagare ser du något annorlunda mättal på sidan med testresultat, bland annat följande:
- Total A/B-testökning
Hur mycket bättre den bästa variation presterade jämfört med den näst bästa variation. Beräknas baserat på det vinnande mättal (dvs. öppningsfrekvens eller klickfrekvens (CR)). - Personaliseringslyft
Procentandel av hur mycket mer framgångsrikt det personaliserade testet var jämfört med ett standardiserat A/B-test. - Klickfrekvens (CR) för personalisering
Den genomsnittliga klickfrekvensen (CR) bland alla variationer av profiler som fick sin föredragna variation. - Profilegenskaper som härletts av Klaviyo AI
En lista över de data som AI:n använder för att fastställa ett mönster bland profiler som föredrog en specifik variation, dvs. vilka faktorer som sannolikt gjorde att någon föredrog den ena variationen framför den andra. Klicka på varje variation för att se vilka data som används, eftersom de skiljer sig åt per variation.
Förstå vinstsäkerhet och statistisk signifikans
Säg till exempel att du vill se om det påverkar din öppningsfrekvens med din E-postlista om du lägger till emojis i din ämnesrad. Om du bara skickar testet till 2 prenumeranter och emojis har en bättre öppningsfrekvens kan du inte med säkerhet säga att resten av din E-postlista kommer att känna likadant. Om du i stället testade med 100 personer i din E-postlista och såg att emojis har en väsentligt högre öppningsfrekvens, skulle du känna dig mycket säkrare på att emojis i dina ämnesrader är bättre för din målgrupp.
Under Vinstsannolikhet ser du om variationen som visas är statistiskt signifikant eller inte. Om den bedöms vara signifikant betyder det att variationen har en hög vinstsannolikhet (dvs. 90 % eller högre). Ett test kan också vara lovande, oklart eller inte statistiskt signifikant. Läs mer om statistisk signifikans i Klaviyo.
Ytterligare resurser
- Bästa praxis för referens för A/B-testning
Lär dig bästa praxis för att använda Klaviyo's funktioner för A/B-testning för att optimera din kommunikation med kunder.
- Så A/B-testar du ett registreringsformulär
Lär dig hur du använder A/B-testning för att utvärdera prestandan för olika element i dina registreringsformulär. Genom att analysera resultaten effektivt kan du se till att dina formulär tilltalar webbplatsbesökare och bidrar till att listan växer.
- Så A/B-testar du ett flödesmejl
Lär dig hur du använder Klaviyos A/B-testning för att testa enskilda e-postmeddelanden i ett flöde, inklusive sådant som ämnesrad, rabatter och e-postinnehåll osv. Du kan till och med använda A/B-testning för att avgöra om e-postmeddelanden i oformaterad text fungerar bättre än bildtunga HTML-e-postmeddelanden.
- Så A/B-testar du en e-postkampanj
Läs om hur du konfigurerar och kör ett A/B-test för en kampanj, hur du läser testresultaten och några användningsfall för A/B-testning av kampanjer. Klaviyos A/B-testning funktioner för kampanjer gör att du enkelt kan testa olika ämnesrader, meddelandeinnehåll och sändningstid så att du bättre kan förstå vad som fungerar bäst för din målgrupp.