Zum Hauptinhalt springen
Controlled-experiment Using Pre-Experiment Data (CUPED) nutzt Daten vorhandener Besucher, um zuverlässige Experimentier- und Personalization-Ergebnisse zu beschleunigen.

​
Wichtige Vorteile

Verwenden Sie CUPED, um datengestützte Entscheidungen schneller und mit mehr Vertrauen zu treffen. CUPED liefert bessere Schätzungen für Variationseffekte und reduziert das Risiko falsch positiver Ergebnisse bei Tests mit begrenzten Daten.

​
Wann CUPED zu verwenden ist

CUPED ist am effektivsten, wenn:
  • Sie mindestens zwei Wochen vor dem Start des Experiments Zieldaten gesammelt haben.
  • Eine Korrelation zwischen Zielkonversionen vor und während des Experiments besteht.
Berücksichtigen Sie die Ziele Ihres Experiments, bevor Sie CUPED aktivieren. Aktivieren Sie CUPED für die wichtigsten Metriken Ihrer Website, wie zum Beispiel Transaktionen.

​
CUPED aktivieren

So aktivieren Sie CUPED:
  1. Öffnen Sie das Experiment und klicken Sie in der Seitenleiste auf den Tab Data.
  2. Klicken Sie unter Advanced settings auf den Schalter neben CUPED.
  3. Klicken Sie auf das Dropdown-Menü und wählen Sie dann die Ziele aus, für die Sie CUPED aktivieren möchten.
  4. Klicken Sie auf Apply.
CUPED funktioniert nur mit der frequentistischen Statistikmethode. Es funktioniert nicht mit Sequential testing oder Bayesian.
Das Laden der Daten kann länger dauern als mit dem klassischen Algorithmus. Beschränken Sie CUPED auf Ihre Hauptziele, um die Leistung zu erhalten.
Die Seitendaten ändern sich basierend auf den ausgewählten Zielen. Wenn Sie Ihr primäres Ziel auswählen, zeigt der Hauptergebnisblock die CUPED-bereinigten Daten an und ist als CUPED aktiviert gekennzeichnet.
Ebenso werden die Ergebnistabellen für jedes Ziel basierend auf den aktivierten CUPED-Einstellungen aktualisiert.
Die Ergebnisspalten weisen drei Hauptunterschiede auf:
  • Conversion-Rate wird zu Conversion-Rate bereinigt
  • Verbesserungsrate wird zu Verbesserungsrate bereinigt
  • Zuverlässigkeit wird zu Zuverlässigkeit bereinigt
Kameleoon unterstützt filterbasierte Aufschlüsselungen der Ergebnisdaten nur, wenn CUPED deaktiviert ist. Wenn Sie in einer Tabelle auf Aufschlüsselung klicken, werden Sie aufgefordert, die Deaktivierung von CUPED zu bestätigen. Sie können CUPED wieder aktivieren, nachdem Sie den Aufschlüsselungsfilter entfernt haben.
Die Wirksamkeit von CUPED nimmt mit der Zeit zu. Während Sie Kameleoon verwenden, nutzt der Algorithmus mehr Experimentdaten, um die Genauigkeit zu verbessern.

​
Weiterführende Literatur

Weitere Informationen zu CUPED finden Sie im Kameleoon Statistical paper.