Compruebe la muestra y significancia de su test A/B

También verifica si ambas variantes incluyen suficientes conversiones y no conversiones para respaldar razonablemente la aproximación normal. Úselo como una señal rápida y transparente antes de decidir, sin olvidar que la estadística no sustituye el diseño experimental, el control de la calidad del tráfico ni una regla de parada definida de antemano.

Introduzca totales coherentes del mismo experimento

Indique el número de visitantes y conversiones de las variantes A y B. El total de visitantes representa las personas o sesiones aptas asignadas a cada versión, mientras que las conversiones corresponden a quienes completaron el mismo objetivo predefinido. Mantenga idénticos en ambas variantes la ventana de atribución, las reglas de audiencia, el filtrado de bots y la definición de conversión. La calculadora rechaza una variante sin visitantes porque no permite observar una tasa, y también rechaza más conversiones que visitantes, pues eso no describe un resultado binomial de una conversión por persona. Si su métrica admite compras repetidas o varios eventos por visitante, conviértala primero en un resultado individual de conversión o no conversión. No mezcle totales de fechas, campañas, dispositivos o reglas de asignación diferentes salvo que esas diferencias formen parte del experimento previsto. La asignación aleatoria y la exposición simultánea son esenciales: una puntuación z precisa no corrige efectos del día de la semana, repartos defectuosos, visitantes duplicados ni seguimientos distintos entre versiones.

Interprete juntas las tasas, la diferencia y la puntuación z

La tasa observada de cada variante es el número de conversiones dividido por sus visitantes. La diferencia absoluta resta la tasa de A a la de B; por tanto, un resultado positivo favorece a B y uno negativo favorece a A. La diferencia en puntos porcentuales expresa la misma distancia en una escala familiar de 0 a 100 y no equivale al incremento relativo. Después, la calculadora combina las conversiones de ambos grupos para estimar el error estándar esperado bajo la hipótesis nula de tasas subyacentes iguales. Al dividir la diferencia observada por ese error se obtiene la puntuación z. El resultado se marca como estadísticamente notable cuando su valor absoluto alcanza al menos 1.96, el umbral bilateral habitual del 5%. Es una regla de evaluación sencilla, no una promesa de que la página ganadora reproducirá el mismo aumento. No ofrece una probabilidad bayesiana, no corrige revisiones repetidas ni comparaciones múltiples y tampoco incorpora el valor de los ingresos. Considere conjuntamente la dirección, la magnitud práctica y la señal estadística.

Respete la advertencia sobre suficiencia antes de decidir

El procedimiento z de dos proporciones se basa en una aproximación normal. Esta herramienta considera adecuada la muestra únicamente cuando cada variante reúne al menos cinco conversiones y cinco no conversiones. Es un mínimo práctico, no una garantía de potencia suficiente. Si no se cumple, la puntuación z sigue mostrándose por transparencia, pero conviene interpretar con cautela su señal de umbral; quizá resulte más apropiado un método exacto o recopilar más observaciones. Aunque la comprobación sea favorable, valore si el experimento podría detectar el efecto mínimo con importancia comercial. Una mejora diminuta pero estadísticamente notable quizá no compense su implantación, mientras que una diferencia grande y prometedora puede seguir siendo incierta con poco tráfico. Evite detener el test justo cuando la puntuación supere 1.96, porque las consultas repetidas elevan los falsos positivos salvo que use un diseño secuencial. Defina antes del lanzamiento la métrica objetivo, el efecto mínimo detectable, la duración, las exclusiones y la regla de parada. Por último, revise métricas de protección y equilibrio entre segmentos; esta calculadora resume un único resultado binario y no revela páginas más lentas, cambios en devoluciones, desequilibrios de asignación ni mejoras restringidas a tráfico sospechoso.