Saltar al contenido principal

Finalizar un experimento

Vea este vídeo en la Kameleoon Academy para conocer las diferencias entre pruebas A/B y multivariante.

Acceder a la página de finalización

Tras crear sus variaciones, está listo para lanzar su experimento. En el lado derecho del header, haga clic en Finalize. Esto abre la página de finalización, donde completará estos pasos antes del lanzamiento:
En la página de finalización también puede:
  • Estimar la duración del experimento
  • Programar el experimento

Definir el targeting

El targeting es el primer paso para finalizar su experimento A/B. Para más información, consulte Definir el targeting de su experimento.

Distribuir el tráfico

El segundo paso es la asignación de tráfico. Por defecto, Kameleoon distribuye el tráfico de forma equitativa entre las variaciones, pero puede cambiar esta configuración.
En este ejemplo, Kameleoon muestra cada variación al 33,33 % de los visitantes. Para cambiar la asignación de tráfico:
  • Haga clic y arrastre el control deslizante junto a una variación.
  • O haga clic en el número junto a un control deslizante e introduzca un porcentaje.
Para guardar este paso y continuar, haga clic en Next.

Tráfico excluido

Kameleoon asigna automáticamente el tráfico no asignado a una variación a Excluded traffic. Estos visitantes ven la versión original de su página.

Asignación equitativa por variación

Especifique el porcentaje total de tráfico que desea desviar a las variaciones del experimento. Por ejemplo, si tiene tres variaciones y establece un desvío del 75 %, Kameleoon asigna el 25 % del tráfico total a la página original y el 25 % a cada variación.

Asignación diferente por variación

Para asignar porcentajes distintos a cada variación, utilice los controles deslizantes para ajustar los valores.
También puede hacer clic en el valor de porcentaje e introducir uno nuevo. Para volver a una distribución equitativa, haga clic en Allocate equally debajo de la lista de variaciones.

Método de asignación

Seleccione un método de asignación de tráfico en el menú desplegable:
  • Manual: establece manualmente una asignación de tráfico estática para sus visitantes.
  • Multi-armed Bandit: Kameleoon ajusta automáticamente la asignación de tráfico en función del rendimiento de las variaciones.
  • Contextual Bandit: Kameleoon personaliza las variaciones según atributos específicos del visitante y selecciona dinámicamente la mejor variación para cada uno.
Contextual Bandit requiere el complemento Contextual Bandit and AI Targeting. Póngase en contacto con su Customer Success Manager para más información.

Contextual bandits

Los contextual bandits utilizan machine learning para optimizar dinámicamente la asignación de tráfico. Se adaptan en tiempo real para redistribuir el tráfico en función del rendimiento de la variación y del contexto del usuario. Comprender las diferencias entre multi-armed bandits y contextual bandits le ayuda a elegir el mejor método para sus experimentos:
  • Multi-armed bandits:
    • Optimizan la distribución del tráfico entre variaciones para maximizar un objetivo específico, como clics o conversiones.
    • Tratan a todos los usuarios por igual y no distinguen entre atributos de usuario.
    • Ideales cuando los datos específicos del usuario no están disponibles o no son necesarios, y desea encontrar la variación de mejor rendimiento para toda la audiencia.
  • Contextual bandits:
    • Incorporan datos adicionales específicos del usuario, como tipo de dispositivo, ubicación o comportamiento, en la toma de decisiones.
    • Adaptan las variaciones a usuarios específicos para obtener resultados mejorados y personalizados.
    • Optimizan las decisiones en entornos dinámicos aprovechando los atributos del usuario.
Para obtener más información sobre cómo funcionan los contextual bandits de Kameleoon, lea el documento estadístico de Kameleoon.
Configurar contextual bandits
Para habilitar los contextual bandits:
  1. Vaya al panel Finalization.
  2. Haga clic en Traffic allocation.
  3. En el menú desplegable Select the allocation method, seleccione Contextual bandit.
Por defecto, el algoritmo optimiza el tráfico en función de atributos de usuario predefinidos en Kameleoon. Para aprovechar todo el poder de los contextual bandits, proporcione datos personalizados como entrada para el modelo de machine learning. Los datos personalizados ayudan al algoritmo a hacer predicciones más precisas basadas en atributos específicos del negocio, como segmentos CRM, historial de compras o comportamiento en la aplicación. Custom Data Premium requiere el complemento AI Predictive Targeting. Para utilizar datos personalizados en su experimento:
  1. Abra su panel de configuración de datos personalizados.
  2. Active Use this custom data as input for AI Predictive Targeting.
A continuación, el algoritmo de Kameleoon utiliza estos atributos para ofrecer la variación más relevante a cada visitante. Para más información sobre AI Predictive Targeting, consulte AI Predictive Targeting.

Reasignación avanzada

La reasignación avanzada solo está disponible para experimentos en línea.
Utilice Advanced reallocation para redistribuir el tráfico entre las variaciones de su experimento. Al aplicar esta función, Kameleoon restablece la asignación de tráfico y trata a los visitantes recurrentes como nuevos visitantes. Esto es útil para centrarse en variaciones específicas o excluir otras del tráfico futuro. En la parte superior derecha del paso de distribución de tráfico, haga clic en Advanced reallocation. En el panel, elija qué variaciones incluir en el tráfico reasignado.
La reasignación se aplica después de hacer clic en Reallocate y luego en Save en la parte superior derecha de la página.

Establecer una variación de referencia

Cuando analiza los resultados del experimento, Kameleoon utiliza una variación de referencia para calcular el uplift de rendimiento de las otras variaciones. Por defecto, Kameleoon establece la variación Original como referencia.
Variación de referencia

Requisitos para las variaciones de referencia

Para garantizar informes precisos, una variación de referencia debe cumplir los siguientes criterios:
  • Tráfico asignado: la variación de referencia debe tener un porcentaje de tráfico superior al 0 %.
  • Estado habilitado: la variación debe estar activa.
Si asigna el 0 % de tráfico a la variación Original, debe seleccionar otra variación como referencia. Si la variación de referencia elegida no tiene tráfico o está desactivada, Kameleoon muestra una advertencia: “Pick a reference variation with traffic allocated.”

Cambiar la variación de referencia

Para cambiar la referencia a otra variación:
  1. En la sección Traffic allocation, localice la variación que desea utilizar como referencia.
  2. Haga clic en el menú de tres puntos de esa variación.
  3. Seleccione Set as reference variation.
Aparece un distintivo junto a la variación para indicar su estado como referencia para la página de resultados.

Definir objetivos

Este paso es obligatorio salvo que haya configurado una integración (herramienta de informes). Seleccione uno o varios objetivos para usar Kameleoon como herramienta de informes.

Objetivos disponibles

Para usar Kameleoon como herramienta de informes, defina un objetivo de conversión. Un objetivo es la métrica que pretende mejorar con su experimento A/B. Kameleoon admite los siguientes tipos de objetivos:
  • Engagement: el visitante visita otras páginas después de la página de destino.
  • Click tracking: el visitante hace clic en un elemento específico que ha definido.
  • Scroll tracking: el visitante hace scroll más allá de una parte específica de su página.
  • Access to a page: el visitante llega a una página específica.
  • Number of pages viewed: el visitante visita un número determinado de páginas.
  • Time elapsed: el visitante pasa un tiempo predefinido en su sitio web.
  • Custom goal: para métricas complejas, puede crear objetivos personalizados mediante la API de Kameleoon.

Crear un nuevo objetivo

Para saber cómo añadir un objetivo, consulte Crear un objetivo.

Asociar un objetivo a su experimento

Tras crear un objetivo, asócielo a su experimento:
  1. En la página de finalización, haga clic en Goals.
  2. Seleccione su objetivo.
  3. Para guardar este paso, haga clic en Next.

Configurar herramientas de informes

Este paso es obligatorio salvo que haya configurado un objetivo.

Añadir una nueva integración

Para saber cómo añadir una nueva integración, consulte Información general sobre integraciones.

Activar una integración en un experimento

Después de añadir una herramienta de informes a su lista de integraciones, puede asociarla a un experimento. Para asociar una integración:
  1. En la página de finalización, haga clic en Integrations.
  2. Seleccione la herramienta.
  3. Para guardar este paso, haga clic en Next.

Ajustes generales

Utilice este menú para gestionar la configuración general de su experimento:
  • Información principal
  • Código del experimento
  • Script personalizado del experimento
  • Ajustes avanzados

Información principal

Gestione aquí los detalles principales del experimento, incluida la URL de carga del editor, las etiquetas y la hipótesis.

Código del experimento

Esta sección contiene el código general que Kameleoon aplica a cada variación. Para añadir este código a la variación original, active el interruptor.

Script personalizado del experimento

Utilice esta sección para añadir código JavaScript que se aplique a todo el experimento. Este código se ejecuta con el script global de Kameleoon. Kameleoon elimina automáticamente estos cambios cuando el experimento finaliza. Este script se ejecuta antes de todo el código del experimento y de la variación. Se ejecuta independientemente de las condiciones de targeting en cuanto Kameleoon se carga.

Ajustes avanzados

Acceda aquí a las opciones de configuración avanzada.

Ventana de atribución personalizada

Defina una ventana de atribución en días y horas. La ventana de atribución es el período durante el cual Kameleoon vincula las conversiones y los ingresos del visitante a una variación específica. Por defecto, Kameleoon establece la ventana de atribución a nivel del sitio web. Puede personalizarla aquí antes de lanzar el experimento. Para más información, consulte Cómo Kameleoon cuenta las conversiones.

Límites de visualización

Para saber cómo crear un límite de visualización, consulte Uso del Code editor. Puede configurar los límites de visualización en Advanced settings o en el menú Variation. La sección Advanced settings ofrece una visión general de todos los límites configurados.

Opciones del código JavaScript

Habilite esta opción para cargar el código JavaScript del experimento después de que la página se cargue por completo. Esto garantiza que todos los elementos de la página se carguen antes de que el código se ejecute, lo que evita conflictos y mejora el rendimiento. Utilice esta opción si sus variaciones dependen de elementos que se cargan después del renderizado inicial de la página.

Simular

Utilice el modo de simulación para comprobar si:
  • Sus variaciones o personalizaciones se muestran correctamente.
  • Su targeting está configurado correctamente.
  • Los objetivos llevan a conversiones.
  • Los visitantes ven el contenido previsto.
Para más información, consulte Simular una campaña.

Estimar la duración del experimento

En el panel de finalización, puede estimar la duración de su experimento.
Proporcione la siguiente información para generar una estimación:
  • Average daily visitors: número estimado de visitantes a las páginas probadas por día.
  • Current conversion rate: la tasa de conversión de referencia para su objetivo principal.
  • Minimum Detectable Effect (MDE): el cambio más pequeño en la métrica del objetivo que pretende identificar, relativo a la variación de control.
  • Desired reliability rate: el nivel de confianza necesario para confirmar los resultados (por defecto, 95 %). Aumentar este valor reduce el riesgo de falsos positivos, pero requiere más visitantes.
Esta es una estimación. Tras el lanzamiento, el índice de fiabilidad en la página de resultados proporciona los datos reales. Para más información, consulte Acceder a la página de resultados.
El estimador tiene en cuenta automáticamente la asignación de tráfico y el número de variaciones.
También puede utilizar la calculadora gratuita de duración de pruebas A/B para obtener una estimación precisa.

Lanzar

Lanzar inmediatamente

Cuando complete todos los pasos obligatorios de finalización, aparecerá un icono de marca verde.
Kameleoon recomienda simular su experimento antes del lanzamiento para verificar la visualización, el targeting y las conversiones de objetivos. Cuando esté listo, haga clic en Launch. El panel Configuration summary muestra los ajustes de su experimento.
Para modificar la configuración, haga clic en una opción de configuración y seleccione Edit. Cuando esté satisfecho, haga clic en Launch en la esquina inferior derecha. Su experimento ya está en línea.
Puede producirse un breve período de latencia (hasta 10 minutos) entre el lanzamiento de un experimento y su visibilidad en su sitio web.

Programar

Puede programar su experimento con una fecha de inicio, una fecha de finalización, o ambas. Para programar el experimento, haga clic en el menú de tres puntos y seleccione Schedule:
Alternativamente, haga clic en Schedule en la parte inferior del Configuration summary.
Advanced schedule le permite establecer la zona horaria y automatizar cuándo termina el experimento. Las paradas automáticas se activan cuando la tasa de fiabilidad se estabiliza en el valor configurado o cuando el tráfico alcanza un umbral definido. Evite establecer una fecha de finalización para los experimentos A/B antes del lanzamiento. Utilice la tasa de confianza como su indicador principal de cuándo detener un experimento. Para experimentos vinculados a eventos o plazos específicos, puede definir una fecha de finalización. Revise siempre la tasa de confianza antes de analizar los resultados.
Cuando un experimento programado alcanza su fecha de finalización, Kameleoon pausa el experimento. Puede reanudarlo en cualquier momento.