Cómo usar esta calculadora
- Introduzca las dos tasas que desea distinguir.
- Indique la muestra de cada grupo.
- Defina el nivel de significación.
- Interprete la potencia junto con el tamaño del efecto.
#3135 · Herramienta de IA y tecnología
Potencia estadística de experimento A/B
Estima la potencia aproximada de una comparación A/B de dos tasas de conversión con tamaños de muestra definidos. El cálculo usa una aproximación normal y permite evaluar si el tráfico disponible tiene capacidad razonable para detectar la diferencia indicada antes de interpretar un resultado no significativo.
Calculadora
Parámetros de cálculoFórmula
SE = √[p₁(1−p₁)/n₁ + p₂(1−p₂)/n₂]; señal = |p₂−p₁|/SE; potencia ≈ Φ(señal − zα)
Qué significa el resultado
La potencia aumenta con muestras mayores y diferencias más grandes. Esta aproximación es orientativa y no sustituye una implementación estadística exacta.
La aproximación usa un umbral bilateral simplificado y una aproximación de la función normal acumulada.
Ejemplo de cálculo
Con 10 % frente a 12 %, 5.000 observaciones en cada grupo y α = 5 %, la diferencia absoluta es 2 puntos porcentuales y la potencia aproximada resulta elevada.
Consejos para obtener mejores resultados
- Evalúe potencia para el MDE definido antes del test.
- No use potencia post hoc como sustituto del intervalo de confianza.
- Aumente muestra si necesita detectar diferencias pequeñas.
- Mantenga la definición de conversión estable entre grupos.
Preguntas frecuentes
¿Qué potencia necesito para una prueba A/B de conversión?
El objetivo depende del protocolo; 80 % y 90 % son elecciones frecuentes, pero deben definirse antes del análisis.
¿Por qué aumenta la potencia al subir el tamaño de muestra?
Porque disminuye el error estándar y una misma diferencia se vuelve más fácil de distinguir del ruido.
¿Una potencia alta garantiza significación estadística?
No. Indica capacidad de detección bajo un efecto supuesto, pero el resultado observado puede variar.
¿Puedo comparar grupos con tamaños diferentes?
Sí. La fórmula usa n₁ y n₂ por separado y refleja la pérdida de precisión de un grupo pequeño.
¿Esta potencia sirve para métricas de promedio?
No. Está planteada para proporciones; una métrica continua requiere su desviación estándar y otra fórmula.
Calculadoras relacionadas
Resumen de variables
| Indicador | Lectura |
|---|---|
| Diferencia absoluta | Separación entre las dos tasas |
| Error estándar | Incertidumbre combinada |
| Potencia | Capacidad aproximada de detección |