Cómo revisar los resultados de tus pruebas A/B para campañas

Objetivos de aprendizaje

Aprende qué datos puedes encontrar en la página de resultados de las pruebas A/B y qué significa cada uno de estos indicadores. La información de esta guía se aplica tanto a las pruebas A/B con campañas de correo electrónico como a las campañasSMS .

Las campañas de pruebas A/B pueden proporcionar valiosas oportunidades/información sobre tu audiencia, al simplificar la determinación de los cambios que debes introducir en tu estrategia de envío. No sólo conocerás la variante ganadora de una prueba A/B, sino también otros factores importantes, como el porcentaje de confianza de victoria y los detalles métricos ganadores.

Resultados de la prueba A/B

Para ver los resultados de una prueba A/B:

1. Navega hasta la campaña que estás probando.
2. Selecciona la pestaña Resultados de la prueba A/B del informe principal de la campaña.
   

Resumen de la prueba

En la sección Resultados de la prueba, verás una instantánea con lo siguiente:

• Variante ganadora
  Una vez finalizada una prueba, la variante que ha ganado.
• Estado
  Si la prueba A/B está en curso (es decir, recopilando análisis) o finalizada.
• Probabilidad de ganar
  Probabilidad de que la variante ganadora haya tenido realmente la mayor tasa de pedidos abiertos, clicados o colocados, teniendo en cuenta el azar, y si esta probabilidad se considera estadísticamente significativa.
• Levantar
  Cuánto mejor funcionó la variante ganadora sobre la otra variante. Calculada en función de la métrica ganadora (es decir, tasa de apertura, tasa de clics (CR) o tasa de pedidos colocada). Para las pruebas con más de 3 variantes, se utiliza para la comparación la segunda prueba con mejores resultados.
• Métrica ganadora
  Los resultados de la variante ganadora para la métrica que se utilizó en la prueba. Por ejemplo, si se eligiera la tasa de apertura como métrica ganadora, se mostraría el porcentaje de tasa de apertura.

Debajo de estos resultados, puedes revisar la tasa de pedidos abiertos, clicados y colocados para cada variante de la prueba.

Cómo se calcula la elevación

El porcentaje de levantamiento es diferente del porcentaje mostrado para tu variante ganadora. Esto se debe a que el porcentaje que aparece junto a cada variante es el porcentaje de personas que interactuaron con el correo electrónico (abrieron, hicieron clic, hicieron un pedido), mientras que el ascensor es el porcentaje de mejora que tuvo el ganador sobre la otra variante.

Por ejemplo, si utilizas la tasa de clics (CR) como métrica ganadora y la variante A tiene 5/100 (5%) clics de destinatarios y la variante B tiene 4/100 (4%) clics de destinatarios, la diferencia entre las variantes es de 1 clic. Eso significa que la elevación fue de 1/5 (20%). En otras palabras, la elevación fue de 20%, teniendo la variante A una tasa de clics (CR) de 5% y la variante B una tasa de clics (CR) de 4%.

Resultados variantes personalizados

Si elegiste la opción de personalizar variante para cada destinatario, verás métricas ligeramente diferentes en la página de resultados de la prueba, como las siguientes:

• Elevación total de la prueba A/B
  Cuánto mejor funcionó la mejor variante respecto a la segunda mejor variante. Calculado a partir de la métrica ganadora (es decir, tasa de apertura o tasa de clics (CR)).
• Elevación de la personalización
  Porcentaje de éxito de la prueba personalizada respecto a una prueba A/B estándar.
• Personalización tasa de clics (CR)
  La tasa media de clics (CR) entre todas las variantes de perfil que recibieron su variante preferida.
• características del perfil derivadas por Klaviyo AI
  Una lista de los datos utilizados por la inteligencia artificial (IA) para determinar un patrón entre los perfiles que prefirieron una variante específica, es decir, qué factores probablemente hicieron que alguien prefiriera una variante a otra. Haz clic en cada variante para ver los datos utilizados, ya que variarán según la variante.

Comprender la confianza en la victoria y la significación estadística

Digamos, por ejemplo, que quieres ver si añadir emojis a tu asunto repercute en tu tasa de apertura con tu lista de correos electrónicos. Si sólo envías la prueba a 2 suscriptores y los emojis tienen una mejor tasa de apertura, no puedes afirmar de forma concluyente que el resto de tu lista de correos electrónicos opinará lo mismo. Si en cambio hicieras la prueba con 100 personas de tu lista de correos electrónicos y descubrieras que los emojis tienen una tasa de apertura sustancialmente mayor, te sentirías mucho más seguro de que utilizar emojis en tu asunto es mejor para tu audiencia.

En Ganar probabilidad, verás si la variante mostrada es estadísticamente significativa o no. Si se considera significativa, significa que la variante tiene una alta probabilidad de ganar (es decir, 90% o más). Una prueba también puede ser prometedora, no concluyente o no estadísticamente significativa. Más información sobre la significación estadística en Klaviyo.

Recursos adicionales