Passar para o conteúdo principal

Teste A/B: comparar duas versões no mesmo fluxo

Use o nó Teste A/B para dividir o público em duas variações por sorteio e entender como acompanhar o resultado de cada uma.

O Teste A/B divide o público do fluxo em duas variações, por percentual, sem usar nenhuma regra. Você coloca uma mensagem ou uma estratégia diferente em cada variação e depois compara os resultados.

Na lista de ações, a descrição é: "Divide o tráfego entre ramos por percentual, sem nenhuma regra." Na folha do nó: "Divide o público em duas variações para comparar resultado."

O Teste A/B é um nó separado da Condição, na categoria Controle do seletor. Ele não aparece no grupo Mais usados: procure na aba Controle (ou busque por Teste A/B).

Teste A/B ou Condição? O Teste A/B separa os clientes por sorteio. A Condição separa por uma regra (por exemplo, "tem uma tag?"). São duas opções diferentes na aba Controle.


Como adicionar

  1. No canvas, clique no + da saída do cartão onde o teste deve começar.

  2. No seletor (Buscar tipo de nó…), abra a aba Controle e escolha Teste A/B.

  3. Na folha, escolha a Divisão do público.

  4. Clique em Salvar.

  5. Ligue um passo a cada variação (por exemplo, um Enviar e-mail diferente em cada uma).


A folha do Teste A/B

Ao lado do título há um ícone de lápis (Renomear), que abre o campo Nome do nó, para você dar um nome ao passo. A folha tem só um campo, Divisão do público, e a parte Caminhos do nó. Não há outros campos escondidos.

Divisão do público

Campo obrigatório (aparece com asterisco). O ícone ⓘ ao lado do nome explica: proporção de clientes enviada para cada caminho. O campo já vem preenchido com 50% / 50%, então o nó nasce pronto para usar e não mostra selo de pendência. A lista tem cinco opções:

Opção

Variação A

Variação B

50% / 50%

50%

50%

60% / 40%

60%

40%

70% / 30%

70%

30%

80% / 20%

80%

20%

90% / 10%

90%

10%

A própria folha dá uma orientação sobre a escolha. Ela diz que 50% / 50% chega ao resultado com o menor público e é o recomendado. Divisões desiguais expõem menos gente à variação nova, mas precisam de mais clientes para o teste concluir.

A Variação A sempre recebe a maior parte (ou metade, no 50% / 50%). Se você quer proteger a maior parte do público ao testar algo novo, deixe a versão atual na Variação A e a novidade na Variação B, com 90% / 10%, por exemplo. Aceite que o teste vai demorar mais para dar uma resposta.

A frase de orientação da folha é sempre a mesma: ela não muda quando você troca a divisão. Também não surgem outros campos ao trocar de opção. Não é possível digitar uma divisão livre (como 65% / 35%).

Caminhos do nó

O texto da tela é "O nó divide sempre em duas variações, cada uma com o seu caminho no canvas." O ícone ⓘ explica que cada saída do nó continua em uma sequência diferente de etapas. O nó tem sempre duas saídas, nem mais, nem menos. Não existe Adicionar ramo, e você não escolhe o número de variações:

Caminho

O que significa

1 · Variação A

Recebe a primeira porcentagem da divisão.

2 · Variação B

Recebe a segunda porcentagem da divisão.

Por exemplo, em 70% / 30%, a Variação A recebe 70% e a Variação B recebe 30%.

No canvas, o cartão se chama Teste A/B e o subtítulo mostra a divisão escolhida (por exemplo, 70% / 30%). Cada saída aparece com o nome e o percentual, como Variação A · 70% e Variação B · 30% (com a divisão padrão: Variação A · 50% e Variação B · 50%). Cada uma tem o seu + para continuar o fluxo.


Como o sorteio funciona

  • É um sorteio, sem regra. O cliente não escolhe a variação, e você também não.

  • O sorteio é refeito a cada vez que o cliente passa pelo fluxo. Se o mesmo cliente entrar de novo no fluxo (veja a reentrada em Configurações do fluxo), ele pode cair em outra variação. Não conte com o "mesmo cliente sempre no mesmo grupo".

  • Tudo precisa estar ligado. Se uma variação não tiver nenhum passo depois dela, o cliente sorteado para ela termina o fluxo ali (A automação é encerrada). Isso pode ser exatamente o que você quer, por exemplo para ter um grupo de comparação que não recebe nada. Mas só deixe sem passo se for de propósito.


Quando usar

Exemplo: você quer saber qual mensagem de pós-compra funciona melhor.

  1. Gatilho Pedido pago.

  2. Teste A/B com 50% / 50%.

  3. Na Variação A, um Enviar WhatsApp oficial com o template atual.

  4. Na Variação B, um Enviar WhatsApp oficial com um template novo.

  5. Depois de alguns dias, compare as duas mensagens (veja a próxima seção).


Como medir o resultado

Dê um passo de envio próprio a cada variação. É assim que você consegue olhar cada uma separadamente.

Onde olhar:

  • Estatísticas do fluxo, bloco Engajamento por etapa: mostra, por passo de envio, quantas mensagens foram enviadas, lidas e engajadas. Compare o passo da Variação A com o da Variação B. Veja Estatísticas do fluxo.

  • Desempenho do passo: passe o mouse sobre o cartão de envio de cada variação para ver Entrega, Leitura e Engajamento dos últimos 30 dias. Veja Desempenho por nó.

O que não existe (por enquanto):

  • Os relatórios não têm um quadro pronto "Variação A × Variação B". A comparação é feita por você, olhando o passo de cada variação.

  • A receita atribuída aparece para o fluxo inteiro. Este artigo não confirma uma divisão da receita por variação.

Para a comparação ser justa:

  • Compare passos do mesmo canal. Nem todo canal informa leitura. O SMS, por exemplo, aparece como Sem retorno em Leitura, e isso não é 0%. Veja Relatórios: visão geral.

  • Mude uma coisa de cada vez entre as variações (o texto, ou o horário, ou a oferta), para saber o que fez diferença.

  • Para a receita aparecer nos relatórios, o fluxo precisa estar com Ativar atribuição de conversão ligada nas Configurações do fluxo. Ela vem desligada por padrão.

  • Dê tempo ao teste. Divisões desiguais precisam de mais clientes, como a própria folha avisa.


Perguntas frequentes

Posso ter mais de duas variações? Não. O Teste A/B tem sempre duas saídas, Variação A e Variação B. Não existe Adicionar ramo.

Posso escolher uma divisão diferente de 50/50, 60/40, 70/30, 80/20 e 90/10? Não. Essas cinco são as opções da lista.

O mesmo cliente sempre cai na mesma variação? Não há essa garantia. O sorteio é refeito a cada vez que o cliente passa pelo fluxo.

Preciso de uma condição antes do Teste A/B? Não. O Teste A/B não usa regra. Se você quiser testar só com um público específico, coloque uma Condição antes e use o Teste A/B no caminho Sim.

Nome técnico (para suporte): ab_test

Próximos passos

Respondeu à sua pergunta?