Qué son los Health Checks
Los Health Checks son diagnósticos automatizados que supervisan la salud general de su experimento. Se ejecutan cada hora durante las primeras 24 horas tras la activación de un experimento y, posteriormente, a diario para todos los experimentos activos. También puede activarlos manualmente cada vez que abra la página de resultados.
- Detectar anomalías de seguimiento o datos de forma temprana.
- Confirmar que su experimento sigue recopilando datos según lo previsto.
- Identificar posibles sesgos que podrían afectar a sus resultados.
| Nombre de la comprobación | Propósito |
|---|---|
| Visitor Tracking Check | Verifica que nuevos visitantes siguen entrando al experimento con regularidad. |
| Conversion Tracking Check | Garantiza que todos los objetivos adjuntos siguen recibiendo conversiones. |
| SRM Check | Detecta discrepancias en la proporción de la muestra entre las variaciones y la distribución de tráfico esperada. |
| Overlapping Exposure Check | Identifica a los usuarios expuestos a varias variaciones del mismo experimento. |
Umbrales de los Health Checks
Cada Health Check utiliza umbrales específicos para determinar su estado. Comprender estos umbrales le ayuda a interpretar la gravedad de cualquier problema detectado.Sample Ratio Mismatch Check
Esta comprobación utiliza una prueba de chi cuadrado para calcular un p-valor que mide en qué medida la distribución real de su tráfico coincide con el reparto esperado.| Estado | Umbral | Significado |
|---|---|---|
| Passed | p-valor ≥ 0,01 | La asignación de tráfico está equilibrada. La distribución observada coincide con el reparto esperado y la aleatorización funciona correctamente. |
| Warning | 0,001 ≤ p-valor < 0,01 | La asignación de tráfico muestra un desequilibrio menor. El reparto de usuarios se desvía ligeramente del ratio esperado. Aunque no es aún crítico, este estado puede indicar un problema emergente. |
| Failed | p-valor < 0,001 | CRÍTICO: Se ha detectado Sample Ratio Mismatch (SRM). El reparto de usuarios observado es significativamente diferente del ratio esperado, lo que indica una alta probabilidad de un problema sistémico (por ejemplo, error de seguimiento o de implementación). |
Overlapping exposure check
La comprobación de exposición superpuesta identifica el porcentaje de usuarios que ven distintas variaciones del mismo experimento en varias visitas. Una superposición ocurre cuando un usuario ve una variación en una visita inicial y una variación diferente en una visita posterior. El sistema calcula la tasa con la siguiente fórmula: (usuarios expuestos a más de una variación) ÷ (total de usuarios en la prueba).| Estado | Umbral | Significado |
|---|---|---|
| Passed | < 2 % | La contaminación de la muestra es mínima. El nivel de superposición de usuarios se encuentra dentro de los límites aceptables para mantener una alta integridad de los datos. |
| Warning | Del 2 % al 5 % | Se ha detectado una contaminación de muestra moderada. Un pequeño porcentaje de usuarios ha visto varias variaciones, lo que introduce ruido y puede reducir la potencia estadística. |
| Failed | > 5 % | CRÍTICO: alta contaminación de la muestra. Una parte significativa de los usuarios ha estado expuesta a varias variaciones, lo que puede sesgar gravemente los resultados e invalidar el experimento. |
Conversion Tracking Check
Esta comprobación supervisa si sus objetivos están recibiendo activamente conversiones.| Estado | Umbral | Significado |
|---|---|---|
| Passed | Conversiones registradas en las últimas 24 horas | El seguimiento de conversiones está activo. Los eventos de objetivos se están registrando según lo previsto. |
| Warning | Cero conversiones para al menos un objetivo en las últimas 24 horas | No se han registrado conversiones para al menos un objetivo en las últimas 24 horas, lo que podría deberse a un tráfico bajo, pero puede indicar un problema de seguimiento. |
| Failed | Cero conversiones durante > 48-72 horas | CRÍTICO: el seguimiento de conversiones ha fallado. No se han registrado conversiones para al menos un objetivo durante varios días. Es probable que la implementación del seguimiento esté rota. |
Visitor Tracking Check
Esta comprobación verifica que nuevos visitantes siguen entrando al experimento.| Estado | Umbral | Significado |
|---|---|---|
| Passed | Visitantes registrados en las últimas 24 horas | El seguimiento de visitantes está activo. Se han registrado visitantes correctamente en las últimas 24 horas. |
| Warning | Cero visitantes en las últimas 24 horas | Ningún visitante ha llegado al experimento en las últimas 24 horas. El tráfico puede ser bajo o pueden existir problemas de segmentación. |
| Failed | Cero visitantes durante > 48-72 horas | CRÍTICO: no se han detectado nuevos visitantes durante un período prolongado. Es posible que el experimento no esté correctamente segmentado o que problemas técnicos estén bloqueando el registro de visitas. |
Resumen de salud en el menú Overview
En la parte superior del menú Overview, encontrará una insignia de resumen de salud que muestra de un vistazo la salud general de su experimento.
- El color de la insignia representa el estado actual de todas las comprobaciones:
- Rojo: comprobación fallida
- Amarillo: advertencia
- Gris: pendiente
- Verde: todas las comprobaciones superadas
- El texto dentro de la insignia muestra el número de comprobaciones no superadas (rojo + amarillo + gris), o All passed si todo está en verde.
| Icono | Estado | Descripción |
|---|---|---|
| ✅ | Passed | No se detectó ningún problema |
| ⚠️ | Warning | Se detectó un posible problema |
| ❌ | Failed | Problema que afecta al experimento |
| ⚪ | Pending | Comprobación aún no evaluada |
Navegar por el menú Health
El menú Health ofrece una vista detallada e interactiva de todas las comprobaciones y sus resultados.Banner superior
En la parte superior del menú, verá:- X/Y checks run: número de comprobaciones completadas (X) del total (Y).
- Last updated: la hora de evaluación más reciente.
- Status breakdown: un recuento de comprobaciones por estado: Passed, Warning, Failed o Pending.
Detalles de la comprobación
Esta pestaña se divide en dos secciones:- Columna izquierda:
- Una lista clicable de las cuatro comprobaciones de Health, cada una mostrando su icono de estado actual.
- Columna derecha:
- Una descripción detallada de la comprobación seleccionada, que incluye:
- Qué supervisa
- Qué significa el estado actual
- Próximos pasos recomendados si la comprobación tiene un estado Warning o Failed
- Una descripción detallada de la comprobación seleccionada, que incluye:
Casos especiales
Estado Pending
El estado Pending aparece únicamente cuando el experimento se acaba de lanzar y aún no se ha ejecutado ningún trabajo de Health Check. Este estado es temporal y se resuelve automáticamente una vez completada la primera evaluación (cada hora o manual).Experimentos pausados o detenidos
Cuando un experimento está pausado o detenido, el menú Health se desactiva. La insignia de resumen de salud en el menú Overview también se oculta para mantener despejada la página de resultados.Actualización y refresco de datos
- Los Health Checks se ejecutan cada hora durante las primeras 24 horas tras la activación, y luego a diario para todos los experimentos activos.
- Al abrir la página de resultados, las comprobaciones se actualizan bajo demanda.
- Los resultados en caché se muestran al instante y se actualizan automáticamente cuando se reciben nuevos datos.
Compatibilidad
Los Health Checks están disponibles para todos los tipos de experimentos:- Pruebas A/B
- Feature flags
- Campañas de personalización