Menü Health

Das Menü Health hilft Ihnen, die Datenzuverlässigkeit Ihres Experiments zu überwachen. Es führt automatisch eine Reihe von Prüfungen durch, um potenzielle Probleme beim Tracking, beim Traffic-Gleichgewicht oder bei der Datenerfassung zu erkennen, und gibt Ihnen mehr Vertrauen in Ihre Experimentergebnisse. Die Experiments-Startseite und das Menü Übersicht zeigen außerdem ein Health-Status-Badge an, damit Sie schnell sehen können, ob alles reibungslos läuft.

​

Was sind Health Checks?

Health Checks sind automatisierte Diagnosen, die die allgemeine Gesundheit Ihres Experiments überwachen. Sie laufen stündlich während der ersten 24 Stunden, nachdem Sie ein Experiment aktivieren, und danach täglich für alle aktiven Experimente. Sie können sie auch jedes Mal manuell auslösen, wenn Sie die Ergebnisseite öffnen. Diese Prüfungen helfen Ihnen:

• Tracking- oder Datenanomalien frühzeitig zu erkennen.
• Zu bestätigen, dass Ihr Experiment weiterhin wie erwartet Daten sammelt.
• Potenzielle Verzerrungen zu identifizieren, die Ihre Ergebnisse beeinflussen könnten.

Es gibt vier Kernprüfungen:

​

Schwellenwerte für Health Checks

Jeder Health Check verwendet bestimmte Schwellenwerte, um seinen Status zu bestimmen. Das Verständnis dieser Schwellenwerte hilft Ihnen, die Schwere etwaiger erkannter Probleme zu interpretieren.

​

Sample Ratio Mismatch Check

Diese Prüfung verwendet einen Chi-Quadrat-Test, um einen p-Wert zu berechnen, der misst, wie genau Ihre tatsächliche Traffic-Verteilung mit der erwarteten Aufteilung übereinstimmt.

​

Overlapping exposure check

Der Overlapping-Exposure-Check identifiziert den Prozentsatz der Benutzer, die verschiedene Variationen desselben Experiments über mehrere Besuche hinweg sehen. Eine Überlappung tritt auf, wenn ein Benutzer eine Variation bei einem ersten Besuch und eine andere Variation bei einem nachfolgenden Besuch sieht. Das System berechnet die Rate anhand der folgenden Formel: (Benutzer, die mehr als einer Variation ausgesetzt waren) ÷ (Gesamtzahl der Benutzer im Test).

​

Conversion Tracking Check

Diese Prüfung überwacht, ob Ihre Ziele aktiv Conversions erhalten.

​

Visitor Tracking Check

Diese Prüfung überprüft, ob neue Besucher weiterhin in das Experiment einsteigen.

​

Health-Zusammenfassung im Menü Übersicht

Oben im Menü Übersicht finden Sie ein Health-Zusammenfassungs-Badge, das die allgemeine Gesundheit Ihres Experiments auf einen Blick zeigt.

• Die Farbe des Badges stellt den aktuellen Status über alle Prüfungen hinweg dar:
  • Rot: Fehlgeschlagene Prüfung
  • Gelb: Warnung
  • Grau: Ausstehend
  • Grün: Alle Prüfungen bestanden
• Der Text im Badge zeigt die Anzahl der nicht bestandenen Prüfungen (rot + gelb + grau) oder Alle bestanden, wenn alles grün ist.

Bewegen Sie den Mauszeiger über das Badge, um einen Tooltip mit allen vier Prüfungen und ihren individuellen Status anzuzeigen. Klicken Sie unten im Tooltip auf Vollständigen Health-Bericht anzeigen, um das Menü Health zu öffnen.

​

Health-Status auf der Experiments-Startseite

Der Block Health Checks auf der Experiments-Startseite bietet Ihnen einen Überblick über Datenqualitätsprobleme in allen aktiven Experimenten, ohne jedes einzeln öffnen zu müssen. Der Block zeigt vier Zähler, die den allgemeinen Zustand Ihrer aktiven Experimente zusammenfassen:

• Passed: Alle Prüfungen sind fehlerfrei
• Warning: Mindestens eine Prüfung muss überprüft werden
• Failed: Mindestens eine Prüfung ist fehlgeschlagen
• Pending: Prüfungen wurden noch nicht ausgeführt

In diesem Block werden nur Experimente mit Warnungen oder fehlgeschlagenen Prüfungen angezeigt. Der Abschnitt Aktuell live listet fehlerfreie Experimente stattdessen separat auf. Bewegen Sie den Mauszeiger über den Status eines Experiments, um einen Tooltip mit den einzelnen Prüfergebnissen und dem Zeitstempel der letzten Auswertung anzuzeigen. Klicken Sie auf eine Experimentzeile, um das vollständige Menü Health für dieses Experiment zu öffnen.

​

Im Menü Health navigieren

Das Menü Health bietet eine detaillierte, interaktive Ansicht aller Prüfungen und ihrer Ergebnisse.

​

Oberes Banner

Oben im Menü sehen Sie:

• X/Y Prüfungen ausgeführt: Anzahl der abgeschlossenen Prüfungen (X) von der Gesamtzahl (Y).
• Zuletzt aktualisiert: Die letzte Auswertungszeit.
• Statusaufschlüsselung: Eine Anzahl der Prüfungen nach Status: Passed, Warning, Failed oder Pending.

​

Prüfungsdetails

Diese Registerkarte hat zwei Abschnitte:

• Linke Spalte:
  • Eine anklickbare Liste der vier Health Checks, von denen jede ihr aktuelles Status-Symbol anzeigt.
• Rechte Spalte:
  • Eine detaillierte Beschreibung der ausgewählten Prüfung, einschließlich:
    • Was sie überwacht
    • Was der aktuelle Status bedeutet
    • Empfohlene Nächste Schritte, wenn die Prüfung den Status Warning oder Failed hat

Beim Conversion Tracking Check sehen Sie außerdem eine Tabelle mit allen Zielen in Ihrem Experiment, zusammen mit ihren individuellen Status und dem Zeitstempel ihrer letzten aufgezeichneten Conversion.

​

Sonderfälle

​

Status Pending

Der Status Pending wird nur angezeigt, wenn das Experiment gerade gestartet wurde und noch kein Health-Check-Job ausgeführt wurde. Dieser Zustand ist vorübergehend und löst sich automatisch auf, sobald das System die erste Auswertung (stündlich oder manuell) abschließt.

​

Pausierte oder gestoppte Experimente

Wenn Sie ein Experiment pausieren oder stoppen, wird das Health-Menü deaktiviert, und das Menü Übersicht blendet das Health-Zusammenfassungs-Badge aus, um die Ergebnisseite übersichtlich zu halten.

​

Datenaktualisierungen und Aktualisierung

• Health Checks laufen stündlich während der ersten 24 Stunden nach der Aktivierung, dann täglich für alle aktiven Experimente.
• Wenn Sie die Ergebnisseite öffnen, aktualisiert Kameleoon die Prüfungen bei Bedarf.
• Zwischengespeicherte Ergebnisse erscheinen sofort und aktualisieren sich automatisch, sobald neue Daten eintreffen.

​

Kompatibilität

Health Checks sind für alle Experimenttypen verfügbar:

• A/B Tests
• Feature Flags
• Personalization-Kampagnen