Cómo usar esta calculadora
- Introduzca conversiones y muestras de ambos grupos.
- Seleccione el nivel de confianza.
- Calcule la diferencia observada.
- Revise si el intervalo cruza cero y su anchura.
#3136 · Herramienta de IA y tecnología
Intervalo de confianza de experimento A/B
Obtén un intervalo de confianza para la diferencia absoluta de conversión entre control y variante. Introduce conversiones, tamaños de muestra y nivel de confianza para ver el efecto observado, su error estándar y los límites inferior y superior. Es útil para evaluar tanto dirección como precisión del experimento.
Calculadora
Parámetros de cálculoFórmula
IC = (p₂−p₁) ± z × √[p₁(1−p₁)/n₁ + p₂(1−p₂)/n₂]
Qué significa el resultado
El intervalo muestra un rango plausible para la diferencia absoluta bajo la aproximación normal. Un intervalo estrecho indica mayor precisión que uno amplio.
Con muestras muy pequeñas o tasas cercanas a 0 % o 100 %, pueden ser preferibles métodos de intervalo más robustos.
Ejemplo de cálculo
Con 10 % y 12 %, 5.000 observaciones por grupo y 95 % de confianza, la diferencia es 2,00 puntos porcentuales; el intervalo se obtiene sumando y restando 1,96 errores estándar.
Consejos para obtener mejores resultados
- Informe intervalo y efecto, no solo un valor p.
- Use tamaños de muestra efectivos después de filtros.
- No mezcle conversiones calculadas con denominadores distintos.
- Defina el nivel de confianza antes de inspeccionar el resultado.
Preguntas frecuentes
¿Qué significa que el intervalo de confianza A/B incluya cero?
Que el rango calculado contiene una diferencia nula y no permite descartar efectos en ambos sentidos con ese nivel de confianza.
¿El intervalo se expresa en cambio relativo o puntos porcentuales?
Esta calculadora usa diferencia absoluta en puntos porcentuales entre variante y control.
¿Por qué un intervalo se hace más estrecho con más muestra?
Porque el error estándar disminuye a medida que aumentan los tamaños de muestra.
¿Puedo usar un nivel de confianza del 99 %?
Sí. El intervalo será más ancho que al 95 % porque exige un margen estadístico mayor.
¿Sirve esta fórmula si las conversiones son muy cercanas a cero?
Puede ser menos precisa; en extremos o muestras pequeñas conviene considerar métodos específicos para proporciones.
Calculadoras relacionadas
Resumen de variables
| Elemento | Significado |
|---|---|
| Efecto | Diferencia variante menos control |
| Límites | Rango de incertidumbre |
| Error estándar | Precisión del estimador |