Prueba A/B
Una prueba A/B compara dos variantes mediante un método definido para comprender su efecto en un indicador. Se deben establecer la asignación, el volumen, la duración y los criterios de análisis. Una diferencia observada en una muestra pequeña puede deberse al azar. La decisión debe tener en cuenta la incertidumbre y los efectos secundarios.
Un ejemplo concreto
Dos grupos asignados aleatoriamente reciben diferentes líneas de asunto de correo electrónico, con el mismo contenido y al mismo tiempo. El indicador de decisión se fija antes del envío.
Un punto a considerar
Una diferencia observada en un volumen pequeño puede deberse al azar. Evite multiplicar las variantes y deténgase tan pronto como un resultado parezca favorable.
Redactar la decisión antes de iniciar la prueba
Especifique la población, la unidad de distribución, el indicador principal, la duración prevista y los efectos adversos a monitorear. Mantenga una variante de control y evite modificar varios elementos si desea comprender cuál influye. Documente las exclusiones antes del análisis. Un resultado incierto requiere una conclusión cautelosa; no se vuelve positivo simplemente seleccionando retrospectivamente el segmento que parece más favorable.
Preguntas para hacerle a tu equipo
- ¿La prueba abarca el tiempo necesario para la acción medida?
- ¿Se establecieron las reglas de detención y análisis antes de examinar los resultados?


