Mete visitantes y conversiones de Control vs Variante y obtén: CR, uplift, p-value y lectura rápida (si es concluyente o no).
Landing · Ads · Checkout · EmailUsa el mismo periodo y una asignación comparable (random/rotación). Si paras demasiado pronto, casi siempre “no concluye”.
CR, uplift y significancia aproximada (z-test de proporciones).
No tomes decisiones solo por “p-value”. Mira el uplift (impacto real) y evita parar tests demasiado pronto. Si el uplift es pequeño, necesitarás más muestra.
*Contenido informativo. No es asesoramiento profesional.
Que, si no hubiera diferencia real, ver una diferencia igual o mayor sería poco probable (menos del 5%). Con 95% de confianza, el umbral típico es p < 0,05.
Dos colas es lo estándar (detecta mejora o empeora). Una cola solo si definiste de antemano que solo te importa detectar mejora (y vas a ignorar el caso de empeorar).
Con pocas conversiones (muy raro) o muestras pequeñas. En esos casos, amplía el test. Para web pública, este método es el más usado por simplicidad.
Si quieres validar Calculadora de Significancia A/B (Test de Conversión), prueba un escenario conservador (peor caso) y otro optimista. Si solo sale bien en el optimista, normalmente toca ajustar costes, precio o conversión.
¿Esto es exacto? Es una estimación para decidir. Depende de tus datos.
¿Sirve para cualquier sector? Sí, ajustando costes/IVA/margen a tu caso.
¿Qué hago si sale “mal”? Revisa costes ocultos, sube margen o mejora conversión antes de escalar.
¿Cada cuánto recalcular? Ads: semanal. Cambios de precios/costes: al momento.
Contenido informativo. No es asesoramiento financiero, fiscal ni legal.