Uma taxa base baixa custa tráfego
Quanto mais rara a conversão, mais visitantes são necessários para separar uma mudança real do ruído. Grosso modo, reduzir pela metade sua taxa base de conversão dobra o tráfego que cada variante precisa.
Ferramenta gratuita
Antes de lançar um experimento, descubra quantos visitantes cada variante precisa para que o resultado seja realmente confiável. Insira seus números e a calculadora atualiza instantaneamente, tudo no seu navegador.
O que determina o número
Quanto mais rara a conversão, mais visitantes são necessários para separar uma mudança real do ruído. Grosso modo, reduzir pela metade sua taxa base de conversão dobra o tráfego que cada variante precisa.
O efeito mínimo detectável entra ao quadrado na fórmula, então domina todo o resto. Querer detectar um ganho de 5% em vez de 10% custa cerca de quatro vezes mais tráfego — decida que tamanho de vitória mudaria de fato sua decisão e teste esse.
Converta o número acima em semanas inteiras de tráfego e rode o teste por esse período. Parar assim que um resultado fica significativo é a forma mais comum de times lançarem mudanças que não se sustentam.
Perguntas frequentes
Esta ferramenta usa a fórmula padrão de duas proporções baseada na sua taxa de conversão de referência, o efeito mínimo detectável, o nível de confiança escolhido e a potência estatística para estimar os visitantes necessários por variante.
O efeito mínimo detectável é a menor mudança relativa na taxa de conversão que você quer que o teste seja capaz de detectar de forma confiável. Efeitos menores exigem amostras maiores.
Taxas de base mais baixas, efeitos menores, maior confiança e maior poder aumentam o tamanho de amostra necessário para evitar falsos positivos e falsos negativos.
Relacionado
O PulsePanda combina seus experimentos com replay de sessão, mapas de calor, funis e feedback para que você entenda o porquê por trás do sucesso.
Comece grátis