実験データに対する表示制限の影響
高度なセットアップでは、表示制限は、訪問者が一度バリエーションを見た後に動的に除外セグメントにユーザーを追加することによって達成されることがよくあります。これは一般的に、訪問者のカスタムデータまたはローカルストレージ値を設定することで行われます。 実験のコードエディタで表示制限を設定したり、パーソナライゼーション用に同様のキャッピング制限を設定したりすることもできます。例: ポップアップ表示制限と訪問数
バリエーションにマーケティングポップアップが表示されるが、オリジナルには表示されない実験を設定したとします。ユーザーを煩わせないために、ポップアップを月に1回だけ表示するように表示制限を使用します。 この設定により、ユニーク訪問者数のバランスが保たれているにもかかわらず、記録される合計訪問数(セッション)にしばしば不一致が生じます。オリジナル: 表示制限はトリガーされない
Kameleoonが訪問者をオリジナルバージョンに割り当てると:- ポップアップは表示されません。
- ポップアップが表示されないため、月1回の制限は決してアクティブになりません。
- システムは、その後のページビューや再訪問のたびにこの訪問者を追跡します。
バリエーション: 表示制限が適用される
Kameleoonが訪問者をバリエーションに割り当てると:- 最初の訪問で、訪問者はポップアップを見ます。
- システムは表示制限(1/1)に達したことを記録します。
- 次の訪問で、表示制限はポップアップの表示を防ぎます。設定によっては、システムはこれらの後続の訪問をアクティブな実験露出の一部としてカウントしなくなる可能性があります。
訪問数の不一致
このシナリオは、ユニーク訪問者レベルではバランスのとれた分割を作成しますが、合計訪問レベルでは大きな不均衡を作成します。- オリジナル: 1人の訪問者が10回の訪問を生成する可能性があります。
- バリエーション: 1人の訪問者が1回の追跡された訪問のみを生成する可能性があります。
| メトリック | オリジナル(ポップアップなし) | バリエーション(1回でキャップされたポップアップ) |
|---|---|---|
| ユニーク訪問者 | 500 | 500 |
| 総訪問 | 高い(すべての再訪問でターゲットされる) | 低い(1回のみターゲットされる) |
これはサンプル比の不一致ではありません
訪問数に大きな差がある場合、セットアップエラーを疑うのは一般的です。ただし、ユニーク訪問者数が等しい場合、これはサンプル比の不一致(SRM)ではありません。- SRMとは? SRMは、ユニーク訪問者の初期割り当てが設定された分割(例えば50/50)と一致しない統計エラーです。SRMは通常、トラッキングまたは技術的な問題を示します。
- ここで何が起こっているのか? 表示制限は意図したとおりに機能しています。バリエーションの露出をキャップし、自然にそのバリエーションの合計訪問数を減らします。オリジナルは制限する要素がないためキャップされません。