Estima cuántas observaciones necesita cada variante de una prueba A/B antes de tomar una decisión. Introduce la tasa de conversión actual, la mejora mínima que deseas detectar, el nivel de confianza, la potencia estadística y el tráfico diario. Obtendrás el tamaño de muestra por grupo, el total del experimento y una duración aproximada, junto con una lectura práctica para planificar la prueba sin detenerla demasiado pronto.
Se usa una aproximación normal para dos proporciones independientes y reparto 50/50.
La muestra por variante indica cuántos usuarios debe acumular cada grupo antes de evaluar el resultado. La duración es orientativa y supone un reparto uniforme del tráfico.
La aproximación no sustituye un diseño estadístico avanzado cuando hay múltiples métricas, análisis secuencial, segmentación intensa o estacionalidad.
Con conversión base del 5 %, mejora relativa mínima del 15 %, confianza del 95 %, potencia del 80 % y 2.000 usuarios diarios, la herramienta calcula la muestra necesaria por variante y divide la muestra total entre el tráfico diario para estimar la duración.
Se introduce como mejora relativa. Por ejemplo, un 20 % sobre una conversión base del 5 % implica una conversión objetivo del 6 %.
No conviene hacerlo con un diseño fijo, porque revisar repetidamente aumenta el riesgo de falsos positivos.
Sí. La estimación usa dos variantes con asignación equilibrada del tráfico.
Normalmente aumenta mucho la muestra requerida, especialmente cuando la mejora mínima detectable también es pequeña.
La cifra es matemática. En la práctica conviene cubrir ciclos completos y evitar periodos atípicos.
| Elemento | Uso |
|---|---|
| Entradas | Datos introducidos por el usuario |
| Resultado principal | Métrica central del cálculo |
| Resultados secundarios | Contexto para interpretar la decisión |