Herramienta gratuita

Calculadora de significancia de test A/B

Tu test ha terminado, pero ¿ganó realmente la variante? Introduce los visitantes y las conversiones de cada versión y obtén el valor p, el intervalo de confianza y un veredicto en lenguaje claro. Todo se calcula en tu navegador mientras escribes.

+20.0%

La variante supera al control: la diferencia es estadísticamente significativa.

p = 0.0283 con 95 % de confianza

Tasa del control
5.00%
Tasa de la variante
6.00%
Valor p
0.0283
Rango de la diferencia
+0.1% … +1.9%

Preguntas frecuentes

Sobre la significancia estadística

¿Qué significa realmente la significancia estadística?

Significa que la diferencia que has medido difícilmente sea casualidad. Un valor p de 0,03 dice que, si las dos versiones fueran realmente idénticas, verías una brecha así de grande (o mayor) alrededor del 3 % de las veces. Es evidencia de que algo cambió, no una prueba, ni una medida de cuánto cambió.

¿Qué valor p cuenta como ganador?

La convención es un valor p por debajo de 0,05, que equivale al 95 % de confianza. Sube el listón al 99 % cuando el cambio sea caro de lanzar o difícil de revertir, y acepta el 90 % en ajustes de texto de bajo riesgo, donde acertar aproximadamente y rápido vale más que acertar del todo despacio.

¿Puedo detener el test en cuanto se vuelve significativo?

No. Mirar una y otra vez y parar en el primer resultado en verde —el llamado peeking— dispara los falsos positivos. Decide el tamaño de muestra antes de lanzar, llega hasta él y luego lee el resultado una sola vez. La calculadora de tamaño de muestra te da ese número.

¿Esta calculadora envía mis datos a algún sitio?

No. Todo el test se ejecuta en tu navegador con JavaScript sencillo. Nada de lo que escribes se sube, registra ni almacena, y la página funciona sin conexión una vez cargada.

Relacionado

Más de PulsePanda

Descubre por qué ganó el ganador

Un valor p te dice que algo cambió. La repetición de sesiones, los mapas de calor y los embudos de PulsePanda te dicen qué hizo realmente la gente.

Empezar gratis