Calculadora de Teste A/B e Significância Estatística

O que é Significância Estatística e como prever o comportamento futuro?

No tráfego pago — seja em campanhas do Google Ads, Meta Ads ou testes em Landing Pages — comparar apenas a média simples de conversões ou CTR pode induzir a erros graves. Variações temporárias de mercado, sazonalidade e pura sorte amostral acontecem diariamente.

O que significa o Grau de Confiança (90%, 95%, 98%)?

O Grau de Confiança indica a probabilidade matemática de que os resultados se repitam no futuro se você mantiver as mesmas condições de veiculação:

• Confiança de 95% a 99%: Excelente estabilidade preditiva. Há 95% a 99% de certeza de que a variante vencedora continuará sendo a melhor no futuro. O risco de oscilação por sorte é menor que 5%.
• Confiança de 80% a 94%: Tendência positiva de vitória, porém com risco moderado (6% a 20%) de ser uma oscilação temporária. Recomendado aguardar mais amostras.
• Confiança abaixo de 80%: Resultado estocástico e inconclusivo. Os números atuais não têm força estatística para prever o comportamento futuro.

Como funciona o cálculo estatístico?

Utilizamos a fórmula de Teste Z para Duas Proporções Binomiais independentes, que calcula a margem de erro, o desvio-padrão proporcional e o valor $p$ (p-value). Isso permite comparar tanto o CTR (Cliques/Impressões) quanto a Taxa de Conversão (Leads/Cliques ou Vendas/Visitantes).