Esta calculadora utiliza la Prueba Z de Dos Proporciones para determinar si la diferencia entre las tasas de conversión en tu prueba A/B es estadísticamente significativa.

La Hipótesis Nula

En las pruebas A/B, comenzamos con la hipótesis nula (H0): No hay diferencia entre las tasas de conversión del control (A) y la variante (B). La hipótesis alternativa (H1): SÍ hay una diferencia.

Significancia Estadística

Calculamos un valor p que representa la probabilidad de observar la diferencia si la hipótesis nula fuera verdadera. Niveles de confianza comunes:

• 90% de confianza (α = 0.10): Menos estricto, útil para pruebas exploratorias
• 95% de confianza (α = 0.05): Estándar de la industria para la mayoría de pruebas
• 99% de confianza (α = 0.01): Muy estricto, usado para decisiones de alto riesgo

El Problema de Mirar Prematuramente

Uno de los problemas más críticos en las pruebas A/B es 'mirar' - verificar resultados antes de alcanzar el tamaño de muestra predeterminado. Esto aumenta dramáticamente la tasa de falsos positivos. Siempre determina tu tamaño de muestra antes de iniciar una prueba.

El Tamaño de Muestra Importa

Una prueba con 100 visitantes por variación es poco probable que detecte diferencias pequeñas. Para detectar una mejora relativa del 5% con 95% de confianza, típicamente necesitas 10,000+ visitantes por variación.