Entendendo a seção de experimentos

O senhor aprenderá

Saiba como analisar facilmente o sucesso de seus testes A/B usando a seção de experimentos. A seção de experimentos reúne todos os testes A/B realizados em campanhas e fluxos e oferece insights sobre os elementos testados, os canais de marketing usados, as taxas de sucesso e outros dados.

Navegando até a guia experimentos

Acesse Analytics > Experiments > A/B tests.

Quando estiver na seção Experiments (Experiências ), o usuário verá a guia Campaigns (Campanhas ) por padrão. No entanto, o senhor pode clicar na guia Campaigns (Campanhas ) ou na guia Flows (Fluxos ) para analisar os testes A/B específicos de cada um desses canais. Somente proprietários, administradores, gerentes e analistas têm acesso à seção de experimentos.

Usando as opções de pesquisa e configurações

Na parte superior da guia Campaigns (Campanhas ) ou Flows (Fluxos ), há opções para personalizar a visualização dos testes A/B e a capacidade de pesquisar um teste específico.

Busca de um teste

No campo de pesquisa no canto superior esquerdo, digite o nome do seu teste ou uma palavra-chave associada a ele (por exemplo, "Testing BFCM welcome" ou "welcome"). Depois que o senhor digitar uma pesquisa e pressionar enter, sua visualização será reduzida a uma lista de resultados que correspondem aos seus critérios.

Ajuste das opções de configuração

Os menus suspensos na parte superior de cada guia oferecem mais maneiras de restringir e personalizar os resultados dos testes A/B que o senhor vê para campanhas ou fluxos.

Configurações de período
No menu suspenso em Timeframe(Período), o senhor pode optar por revisar os resultados dos testes A/B a partir de:

• Hoje
  Isso inclui todos os testes que tiveram uma data de início no último dia.
• Últimos 7 dias
  Isso inclui todos os testes que tiveram uma data de início nos últimos 7 dias.
• Últimos 30 dias
  Isso inclui todos os testes que tiveram uma data de início nos últimos 30 dias.
• Últimos 90 dias
  Inclui todos os testes que foram executados ou que estão sendo executados no momento nos últimos 90 dias.
• Este ano
  Inclui todos os testes que tiveram uma data de início dentro do presente ano civil até o momento.
• Ano passado
  Isso inclui todos os testes que tiveram uma data de início no ano civil anterior. Por exemplo, se atualmente for 2023, isso seria todos os testes com datas de início a partir de 2022.
• Todo o tempo
  Isso inclui todos os testes que foram executados ou que estão sendo executados no momento.

Configurações do canal de marketing
No menu suspenso em Channel (Canal), o senhor pode optar por restringir seus resultados:

• Todos
  Essa opção mostra os testes A/B de e-mail e SMS.
• E-mail
  Essa opção mostra apenas testes A/B de e-mail.
• SMS
  Essa opção mostra apenas testes A/B de SMS.

Configurações de métrica
No menu suspenso em Métrica vencedora, o senhor pode optar por restringir seus resultados àqueles que contêm apenas determinadas métricas vencedoras, incluindo:

• Taxa de abertura
  Veja apenas os testes A/B que usam a taxa de abertura como a métrica vencedora.
• Taxa de cliques
  Veja apenas os testes A/B que usam a taxa de cl iques como a métrica vencedora.
• Taxa de pedidos colocados
  Veja apenas os testes A/B que usam a taxa de pedidos colocados como a métrica vencedora.
• All
  Veja todas as opções de métricas vencedoras juntas(Open rate, Click rate e Placed order).

Configurações de filtro
No menu suspenso em More filters (Mais filtros), o senhor tem opções para restringir ainda mais os tipos de teste específicos, incluindo:

• Tipo de teste (somente na guia Campaigns )
  Nesse menu suspenso secundário, escolha All (Todos ) para ver todos os tipos de testes. Caso contrário, escolha Content test (Teste de conteúdo ) para testes A/B relacionados ao conteúdo ou aos elementos de seus e-mails (por exemplo, testes executados com o uso de texto de visualização e linhas de assunto diferentes) ou Send time test (Teste de horário de envio ) para e-mails em que você testa o melhor horário de envio.
• Status
  Nesse menu suspenso secundário, escolha In progress (Em andamento ) para ver apenas os testes A/B em execução no momento ou Completed (Concluído ) para ver os testes que foram concluídos.

Se desejar limpar qualquer resultado de pesquisa ou configuração que o senhor tenha ajustado, clique em Clear (Limpar).

Revisão dos resultados dos testes A/B coletados

Por padrão, as guias Campaigns (Campanhas ) e Flows (Fluxos ) reunirão todos os testes A/B concluídos, em execução ou cancelados.

Essa tabela conterá as seguintes colunas:

• Nome do teste
  O nome real de sua campanha. Para fluxos, esse será o nome do seu teste. Essa coluna também incluirá a métrica vencedora usada no teste para campanhas e fluxos.
  Observe que, ao clicar no nome do teste, o senhor será levado à página de resultados do teste A/B para ver mais detalhes sobre suas variações específicas, dados e resultados de ganhos.
• Canal
  O canal de marketing que está sendo testado, seja SMS (conforme indicado pelo ícone do balão de diálogo) ou e-mail (conforme indicado pelo ícone do envelope).
  Observe que as notificações push não podem ser testadas A/B no momento.
• Tipo de teste (somente na guia Campaigns )
  Isso mostrará se o teste é um teste de conteúdo (conforme indicado pelo ícone de lápis) ou um teste de tempo de envio (conforme indicado pelo ícone de relógio).
• Data de início
  Quando o teste A/B foi originalmente iniciado.
• Tamanho do teste
  Quantos perfis foram incluídos no teste A/B em todas as variações.
• Probabilidade de vitória
  Qual é a probabilidade de uma variação produzir melhores resultados com base em seu desempenho superior ao de outras variações. Essa porcentagem representa uma dessas variações.
  Observe que uma variação de mensagem de fluxo é considerada estatisticamente significativa quando pelo menos 500 destinatários receberam cada variação, e a variação tem pelo menos 90% de probabilidade de ganho. Uma campanha é considerada estatisticamente significativa quando pelo menos 50 destinatários receberam cada variação, e a variação tem pelo menos 90% de probabilidade de ganho.
• Status
  Um status verde mostrando que um teste foi concluído ou um status cinza mostrando que ele ainda está em andamento.

Recursos adicionais

Como fazer o teste A/B de e-mails de campanha
Comofazer o teste A/B de um e-mail de fluxo
Como fazer o teste A/B decampanhas de SMS
Como entender asignificância estatística nas campanhas do Klaviyo
Como entender a significância estatística nos fluxos