Como fazer um teste A/B em uma campanha de e-mail

O que você vai aprender

Saiba como configurar e executar um Testes A/B para uma campanha, como ler os resultados do teste e alguns casos de uso de Testes A/B em campanhas. O recurso de Testes A/B da Klaviyo para campanhas permite que você teste facilmente diferentes linha de assunto, conteúdo da mensagem e horário de envio para entender melhor o que funciona melhor para o seu público.

Crie um teste A/B para e-mails de campanha

1. Navegue até Campaigns > Create Campaign.
2. Na barra lateral, dê um nome à sua campanha.
3. Escolha Email e clique em Continuar.
4. Selecione as listas ou os segmentos para os quais você quer enviar.
5. Clique em Avançar.
6. Insira a linha de assunto e, se quiser, edite o texto de prévia, o nome do remetente e o endereço de e-mail do remetente.
7. Crie a primeira versão do seu e-mail, adicionando seu texto, imagens e links.
8. Acima do campo da linha de assunto, clique em Create A/B test.
   • Isso cria automaticamente uma segunda variante idêntica da sua campanha e direciona você para a página Teste A/B da campanha.
     

9. Em cada campo Nome da variante, adicione um nome de variante descritivo que faça referência ao que você está testando em Testes A/B, por exemplo: “E-mail de lançamento de verão - botões brancos.”
   

Configure suas variantes de teste

Agora que você criou um teste, decida a seguir quais elementos da sua campanha você quer testar em termos de desempenho para poder criar as diferentes variantes da sua campanha.

Teste linhas de assunto com IA

Em vez de criar um teste manualmente, você também pode automatizar a criação usando IA. Esse recurso serve especificamente para testar linha de assunto.

1. Crie uma campanha de e-mail usando as etapas da seção anterior.
2. Escolha um modelo e edite o conteúdo do e-mail.
3. Abaixo do campo linha de assunto, escolha uma das opções na seção Gerar uma variante para teste A/B.
   

Depois de escolher uma opção, a IA criará um teste com 2 variantes usando títulos diferentes, mas semelhantes, incluindo seu título original para a variante A e um título gerado pela IA com base no prompt selecionado para a variante B.

As opções disponíveis vão depender da linha de assunto que você inseriu, mas alguns exemplos incluem:

• Personalização vs. sem personalização
  A variante B vai incluir o primeiro nome do cliente na linha de assunto ou remover o nome dele caso ele tenha sido incluído originalmente.
• Curto vs. longo
  A variante B terá uma linha de assunto mais curta ou mais longa, dependendo do comprimento da linha de assunto original.
• Perguntas vs. afirmações
  A variante B vai converter sua linha de assunto original em uma pergunta ou em uma afirmação se ela era originalmente uma pergunta.
• Emoji vs sem emoji
  A variante B vai incluir um emoji relevante na linha de assunto ou remover quaisquer emojis se eles tiverem sido incluídos originalmente.

Leia o restante deste artigo para ver as etapas de como editar e enviar ainda mais seu teste A/B depois que ele for criado.

Conteúdo do teste

Você pode testar o conteúdo da mensagem para determinar o que seu público quer ver. Clique em Testar conteúdo na parte superior da página.

Edite uma das variantes do seu teste A/B. É importante que os testes A/B comparem um fator por vez, então, se você editar a linha de assunto, não altere mais nada. Se quiser, você pode adicionar mais variantes clicando no botão Clonar no card de uma variante específica, mas recomendamos apenas 2 variantes.

Teste de horários de envio

Você também pode testar o horário de envio para determinar quando seu público quer receber suas mensagens. Clique em Testar horários de envio na parte superior da página.

Ao testar o horário de envio, mantenha o conteúdo e a linha de assunto exatamente iguais nas duas variantes.

Se vocênão sabe por onde começar, recomendamos que experimente um horário noturno. Como alternativa, se você se qualificar, poderá usar Smart Send Time.

Selecione uma estratégia de teste

Se a sua conta se qualificar, decida sua estratégia de testes entre as seguintes opções:

• Variante vencedora (teste A/B padrão)
• Variantes personalizadas para cada destinatário

A diferença entre a variante vencedora e as variantes personalizadas

Ambas as opções de estratégia de teste enviarão variantes para um grupo de teste composto por uma porcentagem do total de destinatários da campanha e testarão o sucesso da mensagem com base em uma métrica de sua escolha, por exemplo, taxa de abertura. No entanto, há algumas diferenças importantes em como cada estratégia envia mensagens para o restante dos destinatários após o término do período de teste:

• Variante vencedora - a opção padrão para testes A/B, que determinará 1 variante vencedora e a enviará para o restante dos destinatários da campanha após o término do período de teste.
• Variações personalizadas - usam IA para buscar padrões entre os destinatários de teste que interagem com cada variante. Após o período de teste, a Klaviyo vai prever qual variante terá melhor desempenho para cada destinatário e enviar aos demais destinatários a variante preferida deles.

Variantes personalizadas para cada destinatário

Se você quiser personalizar qual variante cada destinatário recebe individualmente, selecione Variantes personalizadas para cada destinatário.

O Klaviyo usará informações sobre cada perfil para determinar qual variante tem maior probabilidade de ter sucesso ao converter esse perfil. Essas informações do perfil incluem, mas não se limitam a:

• Taxas históricas de engajamento
• Valor da vida útil do cliente (CLV)
• Local

Por exemplo, se você tiver escolhido taxa de abertura como a métrica vencedora e perfis no grupo de teste com valor da vida útil do cliente de 100 ou mais abrirem a variante A com mais frequência, mas perfis com valor da vida útil do cliente menor que 100 abrirem a variante B com mais frequência, o restante dos destinatários da campanha receberá e-mails com base em qual variante têm mais probabilidade de abrir de acordo com o valor da vida útil do cliente. Este é um exemplo simplificado, pois a Klaviyo usará muitos pontos de dados para determinar variantes personalizadas.

Configurar as configurações de teste A/B

Após criar seu conteúdo, defina o tamanho do seu grupo de teste e a duração do seu período de teste.

Primeiro, escolha a métrica vencedora, que é a principal métrica que você quer ver melhorar. Escolha entre:

• Taxa de abertura
  Recomendado ao testar linha de assunto, texto de pré-visualização ou nome e endereço de e-mail do remetente.
• Taxa de cliques (CR)
  Recomendado ao testar o conteúdo do e-mail, como o tamanho ou a cor do botão.
• Taxa de pedido realizado
  Disponível apenas para contas com uma métrica Placed Order e não disponível para variantes personalizadas. Isso é recomendado ao testar conteúdo de e-mail, como se exibir os mais vendidos ou itens novos gera mais conversão.

Recomendamos um tamanho de teste com base no tamanho da sua lista e uma duração do teste com base na métrica do teste A/B (ou seja, aberturas, cliques ou pedidos feitos). Use o controle deslizante para alterar o tamanho do teste, se desejar. Se o tamanho do teste for menor que 100%, você também terá a opção de ajustar a duração do teste.

No exemplo abaixo, 20% dos destinatários da campanha receberão a variante A, e outros 20% receberão a variante B. Dependendo de quantos desses destinatários abrirem, clicarem ou fizerem um pedido (dependendo da métrica vencedora que você selecionou), um vencedor será escolhido após 6 horas, e o restante dos destinatários receberá a variante vencedora.

Depois de ajustar as configurações do teste, clique em Continuar para revisar.

Se você estiver fazendo Testes A/B de conteúdo e quiser enviar sua mensagem com base no fuso horário de cada destinatário:

1. Defina o tamanho do seu teste como 100%.
   

2. Em seguida, ao agendar sua campanha, você terá a opção de escolher o Fuso horário local do destinatário como o fuso horário do envio.
   
   
   

O que testar em um teste A/B

Você deve testar apenas uma variável por vez. Testar várias variáveis simultaneamente pode dificultar (ou impossibilitar) identificar quais variáveis contribuem para um desempenho melhor. Não tem certeza do que testar? Clique nas seções abaixo para ver pontos de partida.

Revise os resultados do teste A/B e selecione um vencedor (opcional)

Navegue até a campanha que você está testando para ver o progresso e conferir qual versão teve melhor desempenho. Se a campanha ainda estiver enviando e você quiser encerrar um teste A/B em andamento:

1. Navegue até a guia Resultados do teste A/B de uma campanha em andamento.
2. Clique no menu de opções adicionais ao lado da versão que você gostaria de escolher.
3. Clique em Escolher como vencedora.

Quando você seleciona manualmente um vencedor, qualquer pessoa que ainda não tiver recebido a campanha receberá a variante vencedora imediatamente. Se o tamanho do seu teste A/B foi de 100% dos destinatários, continuaremos coletando dados durante a janela de conversão da mensagem, então o vencedor pode mudar à medida que novos dados chegarem. Para mais informações, confira Como revisar os resultados do teste A/B do seu e-mail para campanhas.

Recursos adicionais