Zum Hauptinhalt springen
Controlled-experiment Using Pre-Experiment Data (CUPED) nutzt Daten vorhandener Besucher, um zuverlässige Experimentier- und Personalization-Ergebnisse zu beschleunigen.

Wichtige Vorteile

Verwenden Sie CUPED, um datengestützte Entscheidungen schneller und mit mehr Vertrauen zu treffen. CUPED liefert bessere Schätzungen für Variationseffekte und reduziert das Risiko falsch positiver Ergebnisse bei Tests mit begrenzten Daten.

Wann CUPED zu verwenden ist

CUPED ist am effektivsten, wenn:
  1. Sie mindestens zwei Wochen vor dem Start des Experiments Zieldaten gesammelt haben.
  2. Eine Korrelation zwischen Zielkonvertierungen vor und während des Experiments besteht.
Berücksichtigen Sie die Ziele Ihres Experiments, bevor Sie CUPED aktivieren. Aktivieren Sie CUPED für die wichtigsten Metriken Ihrer Website, wie zum Beispiel Transaktionen.

CUPED aktivieren

So aktivieren Sie CUPED:
  1. Navigieren Sie zur Registerkarte Daten in der rechten Seitenleiste.
  1. Klicken Sie unter Erweiterte Einstellungen auf den Schalter neben CUPED.
  1. Klicken Sie auf das Dropdown-Menü und wählen Sie dann die Ziele aus, für die Sie CUPED aktivieren möchten.
  2. Klicken Sie auf Anwenden.
Das Laden der Daten kann länger dauern als mit dem klassischen Algorithmus. Beschränken Sie CUPED auf Ihre Hauptziele, um die Leistung zu erhalten.
Die Seitendaten ändern sich basierend auf den ausgewählten Zielen. Wenn Sie Ihr primäres Ziel auswählen, zeigt der Hauptergebnisblock die CUPED-bereinigten Daten an und ist als CUPED aktiviert gekennzeichnet.
Ebenso werden die Ergebnistabellen für jedes Ziel basierend auf den aktivierten CUPED-Einstellungen aktualisiert.
Die Ergebnisspalten weisen drei Hauptunterschiede auf:
  • Conversion-Rate wird zu Conversion-Rate bereinigt
  • Verbesserungsrate wird zu Verbesserungsrate bereinigt
  • Zuverlässigkeit wird zu Zuverlässigkeit bereinigt
Wenden Sie filterbasierte Aufschlüsselungen nur dann auf Ergebnisdaten an, wenn Sie CUPED deaktivieren. Wenn Sie auf Aufschlüsselung in einer Tabelle klicken, müssen Sie bestätigen, dass Sie CUPED deaktivieren möchten. Sie können CUPED nach dem Entfernen des Aufschlüsselungsfilters erneut aktivieren.
Die Wirksamkeit von CUPED nimmt mit der Zeit zu. Während Sie Kameleoon verwenden, nutzt der Algorithmus mehr Experimentdaten, um die Genauigkeit zu verbessern.

CUPED verwalten

So ändern Sie Ihre CUPED-Konfiguration:
  1. Öffnen Sie das Menü Aktionen.
  2. Wählen Sie CUPED verwalten.
Wählen oder deselektieren Sie Ziele im Popup-Fenster und klicken Sie dann auf Validieren.

CUPED deaktivieren

So kehren Sie zur klassischen statistischen Methode zurück:
  1. Öffnen Sie das Menü Aktionen.
  2. Wählen Sie CUPED verwalten.
Deselektieren Sie die Ziele im Popup-Fenster und klicken Sie auf Validieren. CUPED gilt nicht mehr für Ihre Ergebnisse.
Sobald Sie CUPED aktivieren, verlassen Sie sich konsistent auf seine Ergebnisse. Das Hin- und Herwechseln zwischen den ursprünglichen und CUPED-bereinigten Ergebnissen, um günstigere Ergebnisse zu finden, erhöht das Risiko, den Uplift zu überschätzen und auf falsch positive Ergebnisse zu stoßen.
Weitere Informationen zu CUPED finden Sie im Kameleoon Statistical paper.