Förstå statistisk signifikans i flöde

Du kommer att lära dig

Läs mer om när ett A/B-tests resultat anses vara statistiskt signifikant på Klaviyo flöde. Denna artikel kommer att förklara statistisk signifikans för flöde och när det avgörs.

Statistisk signifikans är när Klaviyo matematiskt kan avgöra om en variation kommer att leda till förbättrad prestanda. Du kan konfigurera ett flöde A/B-test så att det automatiskt väljer en vinnande variation när testresultaten anses vara statistiskt signifikanta.

A/B-testning är nyckeln till att skapa bättre engagemang och förbättra dina kundrelationer genom ett data-drivet tillvägagångssätt. Det är viktigt att förstå om testet kan anses vara statiskt signifikant eller inte. Till exempel, om ett flöde e-post har 2 variationer, och variation A har en klickfrekvens på 15% medan variation B har en klickfrekvens på 14%, hur vet du säkert om variation A eller B presterade bättre?

Hur Klaviyo fastställer statistisk signifikans i flöde

För flöde observerar Klaviyo både antalet personer som fått ett meddelande och vinstsannolikheten, dvs. hur sannolikt det är att en variation kommer att ge bättre resultat baserat på hur väl den överträffar de andra variation(s).

Ett flöde meddelande variation anses statistiskt säkerställt när:

• Minst 500 mottagare har fått varje variation.
• En variation har minst 90% vinstsannolikhet.

Vinstsannolikheten beräknas utifrån den mättal som du valde när du konfigurerade ditt A/B-test. Som standard är denna mättal klickfrekvensen för det meddelande som du testar. I avsnittet Automatic Winner Selection har du möjlighet att automatiskt avsluta testet när ett meddelande variation har fastställts som vinnare baserat på den konfigurerade mättalen, samt möjlighet att avsluta testet när ett specifikt datum är nått. Du kan välja ett eller båda av dessa alternativ. Om båda väljs kommer testet att avslutas baserat på vilket som är nå först, statistisk signifikans eller det angivna datumet.

För mer information, se vår artikel om hur du A/B-testar en flödande e-post.

När du visar resultaten för ett pågående test ser du vinstsannolikheten i det högra sidofältet för detaljer i avsnittet A/B-test. Här kan du se om testresultaten är statistiskt signifikanta och vilken variation som sannolikt kommer att prestera bättre.

För mer information, se vår artikel om hur du granskar e-post A/B-testresultat för flöde.

Ytterligare resurser

läs vår artikel om bästa praxis för A/B-testning. 

Läs mer om andra A/B-tester du kan köra:

• Så här A/B-testar du en flödande e-post
• Hur man A/B-testar en kampanj e-post
• Så här A/B-testar du ett registreringsformulär