En el último video comenté la importancia de respetar la cantidad mínima de usuarios que deben pasar por cada variante de un A/B testing para poder tener certeza sobre el resultado que obtenemos.
Pero también vimos que esa cantidad mínima de usuarios suele ser grande, sobre todo para sitios que tienen baja conversión. Y en general pocos sitios reciben una cantidad diaria de tráfico que haga que ese número sea alcanzable en pocos días…
¿Qué pasa entonces si somos una startup? ¿o incluso qué pasa si estamos en una compañía grande pero trabajamos en un producto que no recibe la mayor parte del tráfico?
¿Debemos dejar de lado el A/B testing? ¿Debemos hacer A/B testings que duren 6 meses en obtener resultados?
La respuesta es no. Existen opciones que son mejores que salir a producción “a ciegas” y que repaso en el video de hoy.
En resumen podemos:
- Utilizar micro-conversiones
- Exigir niveles de impacto más grandes para determinar un ganador con menos usuarios
- Utilizar técnicas alternativas al A/B testing que igual nos dan buenos datos para decidir
Y por último, si no queda opción, evaluar el impacto de reducir la exigencia de confianza 95%.
Este es un tema que me resulta super interesante, así que si tienen otra técnica u opinión para sumar, no duden en dejar comentarios!