O que é Intervalo de Confiança?
Intervalo de confiança, também chamado de confidence interval, é a faixa de valores que provavelmente contém o resultado verdadeiro de uma métrica medida em amostra. Em vez de dizer “a conversão foi 3,2%”, o intervalo diz “a conversão está entre 2,7% e 3,7%, com 95% de confiança”.
O intervalo existe porque toda medição em amostra carrega incerteza. Você testou a página com os visitantes daquela semana, não com o universo inteiro. Dois fatores controlam a largura da faixa: volume de dados aperta o intervalo, variação alta entre os dados alarga.
Como funciona na prática?
Considere um teste A/B em uma loja de calçados.
- Versão A: 4.000 visitantes, 120 pedidos, conversão de 3,0%.
- Versão B: 4.000 visitantes, 148 pedidos, conversão de 3,7%.
À primeira vista, B ganhou. Com esse volume, porém, o intervalo de A fica em torno de 2,5% a 3,5% e o de B em torno de 3,1% a 4,3%, aproximadamente. As faixas se sobrepõem em boa parte, então o teste ainda não separa as duas versões com segurança.
O caminho é seguir coletando até o volume planejado na duração de teste e só então declarar vencedor estatístico. A leitura correta olha para a faixa inteira, e não apenas para o ponto central.
Exemplos de uso
- Uma agência apresenta a conversão do mês como “entre 2,8% e 3,4%” e evita comemorar oscilação de 0,1%.
- Um SaaS testa preço e vê o faturamento por visitante indo de R$ 1,90 a R$ 3,40. A faixa larga indica amostra insuficiente para mexer no preço.
Erros comuns
- Ler apenas o valor central e ignorar a faixa, tratando estimativa como certeza.
- Parar o teste no dia em que os intervalos deixam de se sobrepor, prática que infla o erro.
- Achar que 95% de confiança significa 95% de chance de a versão B ser melhor.
Perguntas frequentes sobre Intervalo de Confiança
O que significa 95% de confiança?
Significa que o método de cálculo, repetido muitas vezes em amostras diferentes, produziria intervalos que contêm o valor real em cerca de 95% das vezes. O número descreve a confiabilidade do procedimento ao longo de várias repetições, não a probabilidade de acerto daquele intervalo específico.
Intervalo de confiança e margem de erro são a mesma coisa?
São partes do mesmo cálculo. A margem de erro é a distância que você soma e subtrai do valor central. O intervalo de confiança é a faixa resultante. Uma conversão de 3,0% com margem de 0,5 ponto gera o intervalo de 2,5% a 3,5%.
Como deixar o intervalo mais estreito?
Aumentando o volume de dados, principalmente. Mais visitantes e mais conversões reduzem a incerteza da estimativa. Reduzir a variação também ajuda, por exemplo testando em um segmento mais homogêneo de tráfego. Baixar o nível de confiança estreita a faixa e aceita mais erro em troca.