Acerca del método bayesiano
El enfoque bayesiano considera los parámetros que desea estimar como constantes desconocidas. Kameleoon modela cada parámetro como una variable aleatoria. El método toma su nombre de la regla de Bayes y le permite calcular cantidades que no están disponibles en el marco frecuentista. La regla de Bayes combina los resultados del experimento con cualquier información previa disponible; no obstante, las pruebas A/B utilizan priores no informativos. Al elegir la distribución a priori, puede aprovechar la distribución posterior para calcular valores como la probabilidad de que una variación mejore al original.Acceder a los resultados bayesianos
Cuando hace clic en Results en el panel, Kameleoon muestra la página de resultados clásica por defecto. Para acceder a los resultados generados por estadística bayesiana:- Haga clic en el menú Actions en la esquina superior derecha de la página.
- Seleccione Enable Bayesian.
No puede acceder a la página de resultados bayesianos si desvía el 100 % del tráfico al original o si el experimento no tiene visitantes.
La página de resultados bayesianos
La estructura de la página de informes bayesianos es similar a la página de resultados clásica. Sin embargo, algunos elementos son diferentes:- Aparecen nuevos indicadores, como la probabilidad de superar a la variación original y la fiabilidad del resultado según Bayes.
- Varios gráficos no aparecen en la página y solo se muestra la tasa de conversión.
Definiciones
Probabilidad de superar al original
Este valor representa la probabilidad de que una variación supere a la página original con una tasa de conversión más alta para un objetivo determinado. Si asigna el 0 % del tráfico al original, las variaciones reciben el 100 % del tráfico y no compiten con el original. En ese caso, el indicador se convierte en la Probabilidad de ser la variación ganadora.Métricas continuas bayesianas
Cuando pasa el cursor sobre métricas no binomiales (como Revenue per visit/visitor o Average cart value), aparece una superposición.
- Improvement rate: este valor indica la tasa de mejora para la métrica. Aparece en verde si es positivo y en rojo si es negativo, junto con un intervalo creíble.
- Probability to win over reference: este valor muestra la probabilidad de que la variación supere a la variación de control. Aparece en verde si es superior al umbral de fiabilidad establecido en la configuración; de lo contrario, aparece en rojo.
- Credible Interval Table: los valores mínimo y máximo definen los límites del intervalo creíble alrededor de la tasa de mejora. Hay un 95 % de probabilidad de que la tasa de mejora se encuentre entre esos valores. Los valores aparecen en verde si son positivos y en rojo si son negativos.