O que é Duração de Teste?
Duração de teste, também chamada de test duration ou tempo de teste A/B, é o período que um experimento precisa ficar no ar até que o resultado mereça confiança. A duração combina dois requisitos: amostra suficiente em cada variação e cobertura dos ciclos naturais de comportamento do público.
O primeiro requisito é estatístico. Cada variação precisa de visitantes e conversões em volume que permita separar efeito real de oscilação aleatória. O segundo requisito é comportamental. Uma semana de terça a terça inclui dias úteis e fim de semana, momentos em que o mesmo site converte de formas diferentes.
Definir a duração antes de começar protege o experimento de uma armadilha comum: olhar o painel todo dia e encerrar assim que aparecer uma diferença favorável. Essa prática, conhecida como peeking, infla a chance de declarar um vencedor estatístico que existe apenas no acaso.
Como funciona na prática?
O planejamento da duração segue quatro passos:
- Levante a taxa de conversão atual da página e o tráfego semanal que ela recebe.
- Defina o efeito mínimo que interessa ao negócio. Detectar uma melhora de 1% exige muito mais amostra do que detectar uma melhora de 20%.
- Use uma calculadora de tamanho de amostra para descobrir quantos visitantes cada variação precisa, com os níveis de confiança e poder estatístico que a equipe adota.
- Divida a amostra necessária pelo tráfego semanal e arredonde para cima, sempre em semanas completas.
Exemplo hipotético: uma página de captação converte 3%, recebe 10.000 visitas por semana e a equipe quer detectar uma melhora relativa de 20%. Se a calculadora indicar 12.000 visitantes por variação, o teste precisa de 24.000 visitas no total, ou seja, cerca de 2,4 semanas. A equipe arredonda para 3 semanas fechadas.
Exemplos de uso
- Um e-commerce de calçados testa a página de produto e fixa 4 semanas de duração, porque o ciclo de compra do público inclui pesquisa em uma visita e decisão em outra, dias depois.
- Uma imobiliária de São Paulo trabalha com poucos leads por semana e ticket alto. O teste da página de agendamento precisaria de meses para atingir amostra, então a equipe troca o experimento por pesquisa com usuários.
- Um SaaS encerra o teste na quarta-feira da terceira semana e depois refaz a leitura fechando semanas completas, porque o tráfego de dias úteis converte quase o dobro do fim de semana.
Erros comuns
- Encerrar o teste no primeiro dia em que a variação aparece na frente, prática conhecida como peeking.
- Rodar por dias soltos em vez de semanas completas, deixando o resultado enviesado pelo dia da semana.
- Alongar o experimento por muitos meses, período em que cookies expiram e o público muda de perfil.
- Rodar teste em página com tráfego insuficiente, sem calcular antes se a amostra é alcançável.
- Ignorar o ciclo de compra e medir só a sessão de entrada em negócios de decisão longa.
Perguntas frequentes sobre Duração de Teste
Quanto tempo deve durar um teste A/B?
A duração depende de três fatores: tráfego da página, taxa de conversão atual e tamanho do efeito que você quer detectar. Calcule a amostra necessária por variação em uma calculadora de tamanho de amostra, divida pelo tráfego semanal e arredonde para semanas completas. Duas a quatro semanas cobre a maioria dos casos.
Por que fechar semanas completas no teste?
Porque o comportamento do visitante muda ao longo da semana. Segunda-feira e domingo costumam apresentar taxas de conversão diferentes no mesmo site. Encerrar o teste no meio da semana faz o resultado carregar o peso desproporcional de alguns dias, distorcendo a comparação entre as variações.
O que acontece se eu encerrar o teste antes do previsto?
Você aumenta a chance de um falso positivo. Nos primeiros dias, os números oscilam bastante e uma variação pode liderar por acaso. Encerrar nesse momento produz um vencedor que não se sustenta quando a mudança vai para 100% do tráfego, e a receita esperada nunca aparece.