CUPED

事前実験データを使用した制御実験(CUPED)は、既存の訪問者からのデータを使用して、信頼性の高い実験とパーソナライゼーション結果を加速します。

​

主な利点

CUPEDを使用して、データ駆動型の意思決定をより速く、より高い信頼性で行います。CUPEDは、バリエーション効果のより良い推定値を提供し、データが限られたテストの偽陽性結果のリスクを削減します。

​

CUPEDを使うタイミング

CUPEDは以下の場合に最も効果的です:

• 実験開始前に少なくとも2週間のゴールデータを収集している。
• 実験前と実験中のゴールコンバージョンに相関関係がある。

CUPEDを有効にする前に、実験のゴールを検討してください。トランザクションなど、サイトの主要メトリクスに対してCUPEDをアクティブ化します。

​

CUPEDの有効化

CUPEDを有効にするには:

1. 実験を開き、サイドバーのDataタブをクリックします。
2. Advanced settingsの下で、CUPEDの横のトグルをクリックします。
3. ドロップダウンメニューをクリックし、CUPEDを有効にしたいゴールを選択します。
4. Applyをクリックします。

ページデータは選択したゴールに基づいて変化します。プライマリゴールを選択した場合、メイン結果ブロックにはCUPED調整済みデータが表示され、CUPED有効とラベル付けされます。 同様に、各ゴールの結果テーブルは、有効になっているCUPED設定に基づいて更新されます。 結果列には3つの主要な違いが表示されます:

• コンバージョン率は調整済みコンバージョン率になります
• 改善率は調整済み改善率になります
• 信頼性は調整済み信頼性になります

CUPEDが無効になっている場合にのみ、Kameleoonは結果データへのフィルタベースの分割をサポートします。テーブルで分割をクリックすると、CUPEDを無効にすることの確認を求められます。分割フィルタを削除した後、CUPEDを再度有効にできます。

​

さらに詳しく

CUPEDの詳細については、Kameleoon統計ペーパーをお読みください。