🗞️ Experimentación avanzada: Una guía para profesionales

Guía avanzada para lanzar test a/b de forma correcta + herramientas

👋 Hola soy Pavel, bienvenido a una nueva 🔒 edición para suscriptores 🔒 de El Descubrimiento. Cada semana hablamos sobre producto, growth y oportunidades en el sector tech.

Si aún no eres suscriptor, esto es lo que te has perdido en este mes:

1. Que hace cuando tu crecimiento se aplana

2. Como diseñar un programa de referidos

3. Cuando usar direct email vs email marketing

---

En el complejo mundo del desarrollo de productos, la experimentación juega un papel crucial. Los test A/B, una herramienta fundamental en este proceso, permiten a las empresas tomar decisiones basadas en datos. Sin embargo, es esencial entender que no todos los aspectos de un producto son susceptibles a este tipo de análisis. Por ejemplo, lanzamientos de productos completamente nuevos o experiencias que antes se han realizado, no son fácilmente testeables debido a posibles sesgos, como el efecto de novedad o la aversión al cambio.

1. Formulación de la hipótesis

Antes de iniciar un test A/B, es vital formular una hipótesis clara. Esta debe responder preguntas clave como: ¿Por qué es necesario realizar el experimento? ¿Cuál es el retorno de la inversión esperado? Además, es crucial considerar el momento adecuado para ejecutar la prueba, teniendo en cuenta factores como la estacionalidad, lanzamientos de nuevas versiones y bugs existentes.

Efecto Mínimo Detectable

Es importante definir el Efecto Mínimo Detectable (MDE, por sus siglas en inglés) esperado. Este se refiere a la menor diferencia aceptable entre el control y la variante. Si la variante es solo un 0.0001% mejor que el control, ¿vale la pena realizar la prueba considerando el coste y el tiempo implicado?

Vamos a descubrirlo en el siguiente punto.