O que você vai aprender
Saiba como executar um teste de otimização em um formulário de inscrição do Klaviyo para determinar o melhor momento para o formulário ser exibido aos compradores do site. Em um teste de otimização, a Klaviyo executa uma série de experimentos gerados por IA para determinar as configurações de tempo de exibição mais eficazes que aumentam a taxa de envio de um formulário.
Um teste de otimização é semelhante a um teste A/B, pois seu objetivo é identificar as áreas que funcionam bem ou que precisam de melhorias. No entanto, um teste de otimização usa IA e é totalmente automatizado para economizar seu tempo e fornecer resultados mais precisos.
Antes de começar
O senhor deve ter pelo menos 400.000 perfis (observe que essa é a contagem total de perfis) para se qualificar para os testes de otimização.
Criar um teste de otimização
Crie e execute um teste de otimização com as configurações de teste desejadas para determinar as configurações ideais de tempo de exibição para seu formulário de inscrição. Depois de concluir um teste de otimização de IA, seu formulário de inscrição será atualizado automaticamente com as novas configurações de tempo de exibição e essa versão estará disponível em seu site. Observe que o senhor só pode executar um teste de otimização por vez.
Para criar um teste de otimização:
- Selecione Formulários de inscrição na navegação à esquerda.
- Crie um novo formulário de inscrição ou abra o editor de formulários para um formulário existente selecionando os três pontos > Editar formulário ao lado do formulário que o senhor deseja usar no teste.
O senhor não pode fazer nenhuma edição no formulário de inscrição (por exemplo, o estilos, conteúdo, comportamento, etc.) enquanto um teste de otimização estiver sendo executado. Se o senhor precisar fazer uma alteração durante a execução de um teste de otimização, terá a opção de encerrar o teste, fazer as alterações desejadas e, em seguida, iniciar um novo teste.
- No canto superior esquerdo, selecione Create A/B test (Criar teste A/B).
- Selecione o teste de otimização.
O senhor não pode iniciar um teste de otimização se um teste A/B estiver em andamento no momento.
- Em Nome do teste, o senhor pode alterar o nome padrão do seu teste. Abaixo disso, o senhor pode verificar as configurações de tempo do grupo de controle ao lado de Settings.
- Selecione Continue para testar as configurações.
- No modal Test settings (Configurações de teste ) que aparece, escolha a porcentagem de tráfego para cada grupo:
-
Grupo de controle
Esse é o grupo que sempre verá a versão atual do formulário. -
Grupo de teste
Esse é o grupo que é testado em todas as fases do teste de otimização.
-
Grupo de controle
- Opcional: Selecione a guia Advanced settings (Configurações avançadas) se quiser especificar melhor os tipos de variações que a IA gerará e testará em seu formulário atual. A partir daí, o senhor pode remover as configurações de tempo que não deseja incluir nos testes ou especificar valores para um atraso de tempo ou porcentagem de rolagem.
No momento, os testes de otimização não permitem variações de exibição de página, portanto, a opção de tempo para exibir Depois que o visitante vê um determinado número de páginas não será considerada no teste. Se o senhor tiver um formulário de inscrição definido para ser exibido com base em uma regra de exibição de página, não verá a opção de criar um teste de otimização.
- Quando tiver escolhido as configurações de teste, selecione Start optimization (Iniciar otimização).
Se o seu formulário de inscrição não tiver tráfego suficiente, aparecerá uma chamada informando que a Klaviyo não recomenda a execução de um teste de otimização nesse formulário. Sugerimos a execução de testes de otimização em formulários de inscrição com maior tráfego para ver os resultados mais precisos. Se o senhor optar por executar o teste em um formulário de baixo tráfego, o teste será executado por um período máximo de 90 dias.
O teste de otimização passará por várias fases, usando IA para testar e medir seu formulário atual em relação a variações com diferentes configurações de tempo de exibição com base em sua configuração de teste. Após a fase 1, a Klaviyo escolherá uma variação sobre a qual deseja obter mais dados para continuar os testes nas fases 2 e 3. O processo de experimentação continuará sendo executado até que a IA recomende uma variação de formulário 3 vezes ou até que 90 dias tenham se passado desde o início do teste. Em qualquer um desses pontos, o teste será encerrado e as configurações ideais de tempo de exibição identificadas pela IA serão automaticamente atualizadas no formulário de inscrição.
Monitorar um teste de otimização em andamentoMonitorar um teste de otimização em andamento
Para monitorar um teste de otimização enquanto ele está sendo executado:
- Selecione Sign-up forms (Formulários de inscrição ) na navegação principal.
- Clique no formulário que tem um teste de otimização em andamento. Ele apresentará um pequeno banner "Running an optimization" (Executando uma otimização) na coluna Status.
- Na barra de menus, clique na guia A/B Test results (Resultados do teste A/B ).
- Certifique-se de que o menu suspenso na parte superior esteja definido como Teste de otimização, juntamente com o nome do teste que o senhor deseja visualizar.
Na guia A/B Test results (Resultados do teste A/B ), o senhor verá uma visão geral do teste de otimização em andamento. Isso inclui um visual do formulário de inscrição que está sendo testado e um detalhamento dos seguintes resultados para a fase em andamento:
-
Aumento da taxa deenvio
Essa é a diferença percentual entre a taxa de envio do grupo de controle e a taxa de envio da variação de melhor desempenho. -
Probabilidade de vitória
Essa é a probabilidade percentual de a variação ter um desempenho melhor do que o grupo de controle. -
Distribuição de tráfego
Essas são as porcentagens de tráfego que o senhor selecionou ao criar o teste inicialmente. Elas refletem a quantidade de tráfego que vai para o grupo de controle e as variações de teste (variações do formulário geradas por IA), respectivamente.
Na metade inferior da guia de resultados do teste A/B, há uma tabela de resultados para cada fase concluída no teste de otimização. Cada fase é dividida em:
-
Data de início
A data em que essa fase começou. -
Visualizações únicas elegíveis
O número de usuários únicos qualificados para visualizar um formulário de inscrição nessa fase de teste. Como o senhor está testando o tempo de exibição, as visualizações serão contadas pelo número de usuários únicos que poderiam ter visto um formulário para comparar com precisão as variações do formulário. -
Taxa de envio elegível
O número de eventos de formulário enviados únicos dividido pelo número de usuários únicos qualificados para ver a variação do formulário(visualizações únicas elegíveis). Por exemplo, se 2 usuários únicos visualizarem uma variação de formulário e 1 deles enviar o formulário, a taxa de envio refletirá 50%. -
Probabilidade de vitória
A probabilidade de vitória da variante que está sendo testada contra o grupo de controle. -
Aumento da taxa de envio
O aumento percentual das taxas de envio em comparação com o grupo de controle.
Clique na seta suspensa em qualquer fase para ver os principais detalhes e dados do grupo de controle, bem como um detalhamento dos dados brutos (ou seja, taxa de envio, probabilidade de vitória e aumento da taxa de envio) para cada variante testada durante a fase. O senhor pode fazer isso para cada fase concluída do experimento.
Uma fase terminará quando houver pelo menos 2 dias e cada variação tiver pelo menos 800 visualizações. Como alternativa, uma fase também será encerrada se o grupo de controle tiver um desempenho estatisticamente significativamente melhor após um dia.
O teste de otimização continuará executando fases até que uma variação de formulário seja identificada como tendo as configurações ideais de tempo de exibição em várias fases consecutivas. O senhor pode visualizar os dados brutos de cada fase na conclusão do teste de otimização.
Editar o nome de um teste de otimizaçãoEditar o nome de um teste de otimização
Para editar o nome do teste de otimização enquanto ele estiver em andamento:
- Na página Formulários de inscrição, selecione o formulário com o teste de otimização em execução.
- Clique na guia A/B Test results (Resultados do teste A/B ).
- No canto superior direito, selecione os três pontos > Edit details (Editar detalhes).
- Em Test name (Nome do teste), substitua o nome atual pela alteração desejada.
- Clique em Salvar.
O senhor não pode fazer edições no próprio formulário de inscrição enquanto um teste de otimização estiver em andamento. Se o usuário entrar no editor de um formulário de inscrição com um teste em andamento, um modal perguntará se o usuário deseja encerrar o teste para fazer edições no formulário e como deseja encerrá-lo. O senhor pode:
-
Manter a variação de controle
Selecionar essa opção significa escolher o formulário de inscrição de controle, que foi testado em comparação com as diferentes variações durante o teste, como a variação de melhor desempenho. Observe que nenhuma alteração será feita porque esse é o formulário de inscrição com o qual o senhor começou o teste inicialmente. -
Substituir o controle pela variação de melhor desempenho
Selecionar essa opção significa escolher a variação de melhor desempenho da fase de teste mais recente como a variação de melhor desempenho. A Klaviyo substituirá o formulário de inscrição com o qual o senhor iniciou o teste pela variação de formulário com melhor desempenho.
Se o senhor optar por encerrar um teste em andamento para fazer modificações no formulário de inscrição, precisará criar um novo teste de otimização para recomeçar.
Encerrar manualmente um teste de otimizaçãoEncerrar manualmente um teste de otimização
Se o senhor precisar fazer ajustes nas configurações do teste (ou seja, na distribuição do tráfego do site ou nas configurações de seleção de variação), terá a opção de encerrar manualmente um teste de otimização, em vez de esperar que os resultados identifiquem um vencedor:
- Na página Formulários de inscrição, selecione o formulário com o teste de otimização em execução.
- Clique na guia A/B Test results (Resultados do teste A/B ).
- No canto superior direito, selecione os 3 pontos > End test.
- No modal de confirmação que é exibido, escolha uma variação vencedora. O senhor pode escolher o grupo de controle ou o vencedor da fase atual do teste.
Se o senhor escolher o vencedor atual como a variação vencedora, o formulário de inscrição original será atualizado automaticamente com as configurações de exibição correspondentes.
- Selecione Choose winner (Escolher vencedor) e encerre o teste.
Próximas etapas
Quando um teste de otimização for concluído e um vencedor estatisticamente significativo for identificado, o formulário de inscrição será atualizado automaticamente para as configurações de tempo de exibição vencedoras, e o status mudará de Ao vivo para Concluído na página de resultados do teste A/B. Nesse ponto, uma visão geral do teste e os resultados finalizados serão exibidos para sua análise.
Veja como visualizar as respostas do formulário de inscrição para se aprofundar nas informações coletadas de seus novos assinantes em seus formulários de inscrição.
Se o senhor tiver vários formulários de inscrição ativos em seu site, considere a possibilidade de ativar as configurações de exibição de prevenção contra colisões para impedir que vários formulários de inscrição apareçam ao mesmo tempo.