Cómo revisar los resultados de tus pruebas A/B para campañas
Qué aprenderás
Descubre qué datos puedes encontrar en la página de resultados de las pruebas A/B y qué significa cada uno de estos indicadores. La información de esta guía se aplica tanto a las pruebas A/B con campañas de email como a las campañas de SMS.
Las campañas de pruebas A/B pueden proporcionar detalles clave valiosos sobre la audiencia, ya que simplifican la determinación de qué cambios hacer en la estrategia de envío. No solo conocerás la variante ganadora de una prueba A/B, sino también otros factores importantes, como la probabilidad de ganar y los detalles clave de la métrica ganadora.
Resultados de la prueba A/B
Para ver los resultados de una prueba A/B:
- Ve a la campaña que estás probando.
- Selecciona la pestaña Resultados de la prueba A/B del informe principal de la campaña.
Resumen de la prueba
Para una prueba A/B estándar, la sección Resumen de la prueba muestra lo siguiente:
- Variante ganadora
Una vez que se completa una prueba, la variante con la métrica ganadora más alta para los resultados que estás viendo. - Estado
Si la prueba A/B está en curso (es decir, recopilando analíticas) o está completa. - Probabilidad de ganar
La probabilidad de que la variante ganadora realmente haya tenido la tasa de apertura, clic o tasa de pedidos más alta, después de tener en cuenta el azar, y si esta probabilidad se considera estadísticamente significativa. - Lift
En qué medida la variante ganadora tuvo un mejor rendimiento que la otra variante. Se calcula en función de la métrica ganadora (es decir, la tasa de apertura, la tasa de clics o la tasa de pedidos realizados). Para las pruebas con 3+ variantes, se utiliza la prueba con el segundo mejor rendimiento para la comparación. - Métrica ganadora
Los resultados de la variante ganadora para la métrica que se usó en la prueba. Por ejemplo, si se eligió la tasa de apertura como métrica ganadora, se mostraría el porcentaje de tasa de apertura.
Debajo de estos resultados, puedes revisar la tasa de apertura y la tasa de clics de cada variante para email, o la tasa de clics para SMS. La tabla también muestra los resultados de conversión cuando hay disponible una métrica de conversión; no siempre se trata de Placed Order.
Para una prueba A/B estándar completada con un grupo de prueba más pequeño que la audiencia completa, usa las pestañas de Resumen de la prueba para comparar:
- Resultados del periodo de prueba muestra las interacciones durante el periodo de prueba de los destinatarios del grupo de prueba.
- Resultados continuos incluye las interacciones posteriores del mismo grupo de prueba. La variante principal puede cambiar a medida que llegan más resultados.
Revisa el resumen de envío del ganador que aparece a continuación para ver las interacciones con la variante ganadora enviada a los destinatarios restantes después del periodo de prueba.
Cómo se calcula el incremento
El porcentaje de lift es diferente del porcentaje que se muestra para la variante ganadora. Esto se debe a que el porcentaje que se muestra junto a cada variante es el porcentaje de personas que interactuaron con el mensaje (abrieron, hicieron clic o realizaron un pedido), mientras que el lift es el porcentaje de mejora que la variante ganadora obtuvo con respecto a la otra variante.
Por ejemplo, si estás usando la tasa de clics como métrica ganadora y la variante A tiene 5/100 (5 %) destinatarios que hacen clic y la variante B tiene 4/100 (4 %) destinatarios que hacen clic, la diferencia es de 1 punto porcentual. El incremento compara esa diferencia con la tasa de clics de la variante B: (5 % − 4 %) / 4 % × 100 = 25 %. Por tanto, la variante A tiene una tasa de clics del 5 % y un incremento del 25 % con respecto a la variante B.
Resultados de variantes personalizadas
La opción de elegir una estrategia de prueba requiere al menos 400 000 perfiles en total. Si la opción no está disponible en tu cuenta, Klaviyo utiliza la estrategia de prueba de la variante ganadora.
Si elegiste Variantes personalizadas para cada destinatario, selecciona Resultados del período de prueba cuando la prueba haya finalizado para ver las siguientes métricas:
- Aumento total de la prueba A/B
La mejora estimada de las variantes personalizadas en comparación con la segunda mejor variante en una prueba A/B estándar, en función de la métrica ganadora (tasa de apertura o tasa de clics). - Mejora de Personalization lift
La mejora estimada a partir de variantes de Personalization en comparación con enviar a todo el mundo la variante ganadora de una prueba A/B estándar. - Tasa de apertura de Personalization o tasa de clics de Personalization
La tasa de apertura o de clics estimada para las variantes personalizadas, basada en los destinatarios de prueba que recibieron la variante que Klaviyo predijo que preferirían. La métrica que se muestra depende de la métrica ganadora que seleccionaste. - Características del perfil derivadas por Klaviyo AI
Características asociadas a destinatarios que tenían más probabilidades de interactuar con una variante específica. Expande cada variante para ver sus características, que pueden variar entre variantes.
Revisa el resumen del envío personalizado para consultar las interacciones con las variantes personalizadas enviadas tras el periodo de prueba.
Comprender la probabilidad de ganar y la significancia estadística
Por ejemplo, imagina que quieres ver si añadir emojis al asunto afecta a tu tasa de apertura con tu lista de email. Si solo envías la prueba a 2 suscriptores y los emojis tienen una mejor tasa de apertura, no puedes afirmar de forma concluyente que el resto de tu lista de email vaya a sentir lo mismo. En cambio, si haces la prueba con 100 personas de tu lista de email y descubres que los emojis tienen una tasa de apertura considerablemente más alta, te sentirás mucho más seguro de que usar emojis en tus asuntos es mejor para tu audiencia.
En Probabilidad de victoria, una prueba A/B estándar completada puede mostrar una etiqueta de significación estadística. Un resultado es estadísticamente significativo cuando su probabilidad de victoria supera el 90 % y cada variante tiene más de 50 entregas de email correctas o entregas de SMS intentadas. Una prueba también puede ser prometedora, no concluyente o no estadísticamente significativa. Para resultados prometedores, repite la prueba para confirmar el hallazgo. Los resultados no concluyentes no muestran una etiqueta de significación. Obtén más información sobre la significación estadística en Klaviyo.
Recursos adicionales
- Best practices for A/B testing reference
Learn best practices for using Klaviyo's A/B testing features to help optimize your communication with customers.
- How to A/B test a sign-up form
Learn how to use A/B testing to evaluate the performance of various elements of your sign-up forms. By effectively analyzing the results, you can ensure that your forms resonate with site visitors and contribute to list growth.
- How to A/B test a flow email
Learn how to use Klaviyo’s A/B testing experience to test individual emails in a flow, including things like subject line, discounts, and email content, etc. You can even use A/B tests to determine if plain-text emails perform better than image-heavy HTML emails.
- How to A/B test an email campaign
Learn how to set up and run an A/B test for a campaign, how to read the test results, and a few use cases for A/B testing campaigns. Klaviyo's A/B testing feature for campaigns allows you to easily test different subject lines, message content, and send times so you can better understand what works best for your audience.