Como fazer um teste A/B em uma campanha de e-mail

O que você vai aprender

Saiba como configurar e executar um teste A/B para uma Campanha, como ler os resultados do teste e alguns casos de uso para o teste A/B da Campanha. KlaviyoO recurso de teste A/B da Campanha permite que o usuário teste facilmente diferentes linhas de assunto, conteúdo da mensagem e tempo de envio para que possa entender melhor o que funciona melhor para o seu público.

Como fazer o teste A/B de e-mails de campanha

1. Navegue até Campaigns > Create Campaign.
2. Na barra lateral, selecione Email.
3. Dê um nome à sua campanha e clique em Continue.
4. Selecione as listas ou segmentos para os quais o senhor deseja enviar.
5. Clique em Next.
6. Insira a linha de assunto e, se desejar, edite o texto de visualização, o nome do remetente e o endereço de e-mail do remetente. 
7. Crie a primeira versão de seu e-mail, adicionando seu texto, imagens e links.
8. Acima do campo da linha de assunto, clique em Create A/B test. Isso criará automaticamente uma segunda variação idêntica da sua campanha e direcionará você para página Campaign A/B test.
   
9. Em cada campo Nome da variação, adicione um nome de variação descritivo que faça referência ao que o senhor está testando A/B, ou seja, "E-mail de lançamento do verão - botões brancos".
   

Automatize os testes A/B com IA

Em vez de criar um teste manualmente, o senhor também pode automatizar a criação usando IA. Esse recurso serve para testar a linha de assunto em particular.

1. Crie uma campanha de e-mail usando as etapas da seção anterior.
2. Escolha um modelo e edite o conteúdo do e-mail.
3. Abaixo do campo linha de assunto, escolha uma das opções na seção Gerar uma variação para teste A/B.
   

Depois de escolher uma opção, a IA criará um teste com duas variações usando títulos diferentes, mas semelhantes, incluindo seu título original para a variação A e um gerado pela IA com base no prompt selecionado para a variação B.

As opções disponíveis dependerão da linha de assunto que o senhor inseriu, mas alguns exemplos incluem:

• Personalização versus não personalização
  A variação B incluirá o primeiro nome do cliente na linha de assunto ou removerá seu nome, se ele tiver sido incluído originalmente.
• Curto ou longo
  A variação B terá uma linha de assunto mais curta ou mais longa, dependendo do tamanho do assunto original.
• Questions vs statement
  A variação B converterá sua linha de assunto original em uma pergunta ou em uma declaração, se originalmente era uma pergunta.
• Emoji vs sem emoji
  A variação B incluirá um emoji relevante na linha de assunto ou removerá quaisquer emojis, caso tenham sido originalmente incluídos.

Leia o restante deste artigo para obter as etapas sobre como editar e enviar seu teste A/B depois de criado.

Conteúdo do teste

O senhor pode testar o conteúdo da mensagem para determinar o que seu público deseja ver. Clique em Testar conteúdo na parte superior da página.

Edite uma das variações do seu teste A/B. É importante que os testes A/B comparem um fator de cada vez, portanto, se o senhor editar a linha de assunto, não altere mais nada. 

Clonar uma variação

Se desejar, o senhor pode adicionar mais variações clicando no botão Clone no cartão para uma variação específica, mas recomendamos apenas duas variações.

Tempos de envio de teste

O senhor também pode testar os horários de envio para determinar quando seu público-alvo deseja receber notícias suas. Clique em Testar tempos de envio na parte superior da página.

Ao testar os horários de envio, mantenha o conteúdo e as linhas de assunto de ambas as variações exatamente iguais. 

Se o senhor não sabe por onde começar, recomendamos que experimente um horário noturno. Como alternativa, se o senhor se qualificar, poderá usar o tempo de Envio Inteligente. 

Selecionar uma estratégia de teste

Se sua conta se qualificar, decida qual será sua estratégia de teste entre as opções a seguir:

• Variação vencedora (teste A/B padrão)
• Variações personalizadas para cada destinatário

A diferença entre variação vencedora e variações personalizadas

Ambas as opções de estratégia de teste enviarão variações a um grupo de teste composto por uma porcentagem do total de destinatários da campanha e testarão o sucesso da mensagem com base em uma métrica de sua escolha, por exemplo, taxa de abertura. No entanto, há algumas diferenças importantes na forma como cada estratégia envia mensagens para o restante dos destinatários após o término do período de teste:

• Variação vencedora - a opção padrão para testes A/B, que determinará uma variação vencedora e a enviará para o restante dos destinatários da campanha após o término do período de teste.
• Variações personalizadas - usa IA para pesquisar padrões entre os destinatários de teste que interagem com cada variação. Após o término do período de teste, a Klaviyo prevê qual variação terá melhor desempenho para cada destinatário e envia ao restante dos destinatários a variação preferida.

Personalizar variações para cada destinatário 

Se o senhor quiser personalizar a variação que cada destinatário recebe individualmente, selecione Personalized variations for each recipient (Variações personalizadas para cada destinatário). 

A Klaviyo usará as informações sobre cada perfil para determinar qual variação tem maior probabilidade de ser bem-sucedida na conversão desse perfil. Essas informações de perfil incluem, mas não se limitam a:

• Taxas de engajamento históricas
• Valor da vida útil do cliente (CLV)
• Localização

Por exemplo, se o senhor tiver escolhido a taxa de abertura como sua métrica vencedora e os perfis no grupo de teste com um CLV de 100 ou mais abrirem a variação A com mais frequência, mas os perfis com um CLV de menos de 100 abrirem a variação B com mais frequência, o restante dos destinatários da campanha receberá e-mails com base na variação que eles têm maior probabilidade de abrir de acordo com seu CLV. Esse é um exemplo simplificado, pois a Klaviyo usará muitos pontos de dados para determinar variações personalizadas.

Configurar as definições do teste A/B

Depois de criar o conteúdo, decida o tamanho do grupo de teste e a duração do período de teste.

Primeiro, escolha a métrica vencedora, que é a principal métrica que o senhor deseja ver melhorada. Escolha entre: 

• Taxa de abertura
  Recomendado ao testar a linha de assunto, o texto de visualização ou o nome do remetente/endereço de e-mail.
• Taxa de cliques
  Recomendado para testar o conteúdo do e-mail, como o tamanho ou a cor do botão.
• Taxa de pedidos feitos
  Disponível apenas para contas com uma métrica de Pedidos feitos e não disponível para variações personalizadas. Isso é recomendado ao testar o conteúdo do e-mail, por exemplo, se a exibição dos itens mais vendidos ou dos novos itens resulta em mais conversões. 

Recomendamos um tamanho de teste com base no tamanho de sua lista e uma duração de teste com base na métrica de teste A/B (ou seja, aberturas, cliques ou pedidos feitos). Use a barra deslizante para alterar o tamanho do teste, se desejar. Se o tamanho do teste for menor que 100%, o senhor também terá a opção de ajustar a duração do teste. 

No exemplo abaixo, 20% dos destinatários da campanha receberão a variação A, e outros 20% receberão a variação B. Dependendo de quantos desses destinatários abrirem, clicarem ou fizerem um pedido (dependendo da métrica vencedora que o senhor selecionou), um vencedor será escolhido após 6 horas, e o restante dos destinatários receberá a variação vencedora. 

Depois de ajustar as configurações do teste, clique em Continue to review (Continuar para revisar).

Se o senhor estiver fazendo testes A/B de conteúdo e quiser enviar a mensagem com base no fuso horário de cada destinatário:

1. Defina o tamanho do teste para 100%.
   
2. Em seguida, ao programar sua campanha, o senhor terá a opção de escolher o fuso horário local do destinatário como o fuso horário para o envio.
   

O que testar A/B 

O senhor só deve testar uma variável de cada vez. Testar diversas variáveis simultaneamente pode dificultar (ou impossibilitar) a identificação de quais variáveis contribuem para melhorar o desempenho. Não tem certeza do que testar? Clique nas seções abaixo para ver os pontos de partida. 

Analise os resultados do teste A/B e selecione um vencedor (opcional)

Navegue até a campanha que o senhor está testando para ver seu progresso e verificar qual versão teve melhor desempenho. Se o senhor quiser encerrar um teste A/B em andamento:

1. Navegue até a guia Resultados do teste A/B de uma campanha em andamento.
2. Clique no menu de opções adicionais ao lado da versão que o senhor deseja escolher.
3. Clique em Choose as Winner (Escolher como vencedor).

Quando o senhor seleciona manualmente um vencedor, qualquer pessoa que ainda não tenha recebido a campanha receberá a variação vencedora imediatamente. Se o tamanho do seu teste A/B foi de 100% dos destinatários, continuaremos coletando dados durante toda a janela de conversão da mensagem, de modo que o vencedor poderá mudar à medida que novos dados forem recebidos. Para obter mais informações, consulte Como analisar os resultados dos testes A/B de e-mail para campanhas.

Recursos adicionais

Recursos adicionais

• Práticas recomendadas para testes A/B
• Como fazer um teste A/B em um e-mail de fluxo
• Como fazer testes A/B em campanhas de SMS
• Como reenviar uma campanha que excedeu os limites de envio da conta
• Como dominar o teste A/B de e-mail: Dicas comprovadas da Klaviyo & Truques para aumentar a receita