O que é Teste A/B?
Teste A/B, em inglês A/B Test, também chamado de Split Test, é a técnica de comparar duas versões de uma mesma página, e-mail, anúncio ou elemento, dividindo o público aleatoriamente entre elas para medir qual versão gera mais conversões. O teste A/B substitui a opinião pela evidência: em vez de discutir qual título é melhor, o time deixa os usuários decidirem com o próprio comportamento.
A mecânica é herdada da pesquisa científica. A versão A (controle) é a página atual; a versão B (variante) contém a mudança que se quer avaliar. Como a divisão do tráfego é aleatória e simultânea, fatores externos, como sazonalidade, campanhas e notícias, afetam as duas versões igualmente. Qualquer diferença consistente de resultado pode ser atribuída à mudança testada.
O teste A/B é a principal ferramenta de validação do CRO. Cada teste parte de uma hipótese clara, roda por um período pré-definido e termina com uma decisão baseada em significância estatística.
Como funciona na prática?
Um teste A/B bem conduzido segue cinco passos. Primeiro, a hipótese: “se mostrarmos o frete na página de produto, a taxa de compra aumentará, porque a surpresa do frete no checkout causa abandono”. Segundo, a definição da métrica principal e do tamanho de amostra necessário; calculadoras de teste fazem essa conta a partir da taxa atual e do efeito mínimo que se quer detectar. Terceiro, a execução: a ferramenta de testes divide o tráfego aleatoriamente e registra as conversões de cada versão. Quarto, a espera: o teste roda até atingir a amostra planejada, respeitando a duração mínima, em geral ciclos completos de semana, porque o comportamento de terça é diferente do de domingo. Quinto, a decisão: com um vencedor estatístico confirmado, a versão melhor vira o novo padrão; sem diferença confiável, o aprendizado também vale e é registrado.
Teste A/B vs Teste Multivariado: qual a diferença?
| Aspecto | Teste A/B | Teste Multivariado |
|---|---|---|
| O que compara | Duas (ou poucas) versões inteiras | Combinações de vários elementos |
| Tráfego necessário | Menor | Muito maior |
| O que revela | Qual versão vence | Qual combinação e qual elemento pesa mais |
| Complexidade | Baixa | Alta |
Veredito: o teste A/B responde “qual versão é melhor” com menos tráfego, enquanto o teste multivariado investiga a interação entre vários elementos e só faz sentido em sites de alto volume.
Exemplos de uso
- Um e-commerce testa a página de produto com e sem selo de “compra garantida” perto do botão. Após quatro semanas e milhares de sessões em cada versão, a variante com selo converte mais e vira padrão (exemplo hipotético).
- Uma empresa B2B testa dois títulos na página de orçamento: “Solicite uma proposta” contra “Receba sua proposta em 24h”. A promessa de prazo vence e o aprendizado (especificidade gera confiança) orienta os próximos textos.
- Um time de e-mail marketing divide a base entre dois assuntos e envia o vencedor para o restante da lista, prática comum em campanhas de grande volume.
Erros comuns
- Encerrar o teste no primeiro dia em que uma versão aparece na frente, antes da amostra planejada.
- Testar mudanças minúsculas (um tom de cor) em páginas de pouco tráfego, onde o efeito jamais será detectável.
- Rodar vários testes sobrepostos na mesma página sem controlar a interferência entre eles.
- Deixar de definir a métrica principal antes de começar e “escolher” depois a métrica que favorece a variante.
- Descartar testes empatados sem registrar o aprendizado; saber que algo pesa pouco também direciona o roadmap.
Perguntas frequentes sobre Teste A/B
Quanto tempo um teste A/B deve rodar?
O tempo depende do tráfego, da taxa de conversão atual e do tamanho do efeito que você quer detectar; uma calculadora de amostra dá o número antes do teste começar. Como regra prática, respeite ciclos completos de semana e evite concluir qualquer coisa com poucos dias de dados.
Posso testar mais de duas versões ao mesmo tempo?
Sim. Testes com três ou mais variantes (às vezes chamados de A/B/n) funcionam com a mesma lógica, mas cada variante adicional divide o tráfego e aumenta a amostra total necessária. Em sites de tráfego moderado, limitar o teste a duas versões costuma gerar respostas mais rápidas.
O que fazer quando o teste A/B empata?
Primeiro, confirme que a amostra planejada foi atingida: empate com pouca amostra é apenas teste inconcluso. Com amostra suficiente, o empate é um resultado válido, mostrando que a mudança tem efeito nulo na conversão. Registre o aprendizado, escolha a versão mais simples de manter e direcione o próximo teste para uma hipótese mais ousada.