En el último tiempo me di cuenta que di por sentado que cuando hablamos de A/B testing los equipos a cargo de ejecutarlos saben cuánto tiempo deben ejecutar las pruebas antes de determinar un ganador. Y me encontré con algunos mitos o ideas que daban a entender que este conocimiento no estaba tan claro 😀
Por eso armé este pequeño video con explicaciones muy básicas sobre la estadística que ocurre “por detrás” de un A/B test, y la forma exacta para determinar muy rápida y fácilmente cuánto debe durar tu prueba.
En resumen queremos:
- Nivel de confianza >95%
- Poder >80%
- No frenar un A/B test cuando llega a 95% de confianza, porque ese valor varía en el tiempo
- Determinar de antemano cuánto tiempo ejecutar la prueba en base a nuestra hipótesis de cambio
Para los que quieran leer más del tema, les dejo un artículo que me parece muy bueno sobre el tema:
https://conversionxl.com/blog/ab-testing-statistics/
Me encantaría saber sus comentarios y otras opiniones o formas de calcularlo que estén usando!