Takeawaysへのアクセス
Insights > Takeawaysをクリックします。
含まれる実験
実験は、次の基準を満たす場合にのみTakeawaysに表示されます:- Status: 実験が45日以上の間、StoppedまたはPausedになっている。
- トラフィックとコンバージョン: 実験には、グローバルで少なくとも100件の訪問、20件のコンバージョン、および定義された参照バリエーションがある。
- バリエーション: 少なくとも2つのバリエーションがデータを収集している。
Search, sort, and filter experiments
Search
ページ上部の検索バーを使用して、名前またはキーワードで実験を検索します。Sort
Sortドロップダウンをクリックして、次の基準で実験を並べ替えます:- Biggest uplift: 正のアップリフトが最も高い実験が最初に表示されます。
- Lowest uplift: アップリフトが最も低い実験が最初に表示されます。
- Most recent: 最近変更された実験が最初に表示されます。
- Least recent: 最も古い実験が最初に表示されます。
Favorites
Favoritesをクリックすると、お気に入りとしてマークした実験のみが表示されます。Filters
Filtersをクリックして、フィルタサイドバーを開き、次の項目で実験リストを絞り込みます:- Project
- Result (Win、Loss、またはInconclusive)
- Creator
- Goal
- Segment
- Experiment type
- Key date (最終変更、最終ステータス変更、または作成)
Key date filter
Key date filterを選択したら、Click to choose a dateフィールドをクリックします。カレンダービューが開き、次のいずれかのオプションを使用して日付範囲を設定できます:- Fixed date range: 開始日と終了日を指定します。
- Since date: 特定の日付から今日までの実験を表示します。
- Last date: 直近の一定期間内の実験を表示します。
実験カード
各実験カードには、主要な情報が一目で分かるように表示されます:- Target
- 実験のターゲットとなっているセグメントまたはオーディエンス。
- Primary goal
- Total revenue
- Result (Win、Loss、またはInconclusive)
- Primary goal uplift
- Revenue uplift
- AI insights
実験結果
Kameleoonは、統計的信頼性に基づいて、各実験に3つの結果ステータスのいずれかを割り当てます:- Win: バリエーションがコントロールを上回り、信頼性のしきい値に達しました。
- Loss: バリエーションがコントロールを下回り、信頼性のしきい値に達しました。
- Inconclusive: 結果は必要な信頼性のしきい値に達しませんでした。実験では、バリエーションが正の影響または負の影響を与えたかどうかを確認するのに十分な統計的根拠が得られませんでした。
Takeawaysは、Inconclusiveの実験について、Primary goal upliftとRevenue upliftを表示しません。収益トラッキングが有効な場合でも、Takeawaysには引き続きTotal revenueが表示されます。
統計手法
Takeawaysは、実験のResults pageで選択された統計手法に関係なく、頻度論的手法を使用して各実験の結果を計算します。 Kameleoonは、実験が初めてTakeawaysに表示されたときに結果を一度だけ計算し、カードに保存します。その後に実験の統計手法を変更しても、保存された結果は更新されません。 頻度論的手法がTakeawaysに適しているのは、StoppedまたはPausedになってから45日以上経過した実験のみが含まれ、それぞれに固定された終了済みの観測期間があるためです。逐次検定を使用すると、偽陽性を増やすことなく実行中の実験を監視できます。そのため、逐次検定は、すでに終了した実験ではなく、実行中の実験向けに設計されています。AI insights
各実験カードには、KameleoonのAIエンジンであるPBX Analyzeが生成したインサイトが含まれます。インサイトは、コンバージョン率、収益、数量などの主要メトリクスの変化を強調し、必要に応じて統計的信頼性を示し、注目すべきトレンドや予期しない結果を明らかにします。カードへの画像の追加
任意の実験カードにカスタム画像を追加すると、一目で識別しやすくなります。 カード画像を追加または置き換えるには:- 実験カードの左側にある画像エリアをクリックします。Image previewが開きます。
- デバイスからファイルを選択するにはUpload from computerを、画像のURLを入力するにはUpload via URLをクリックします。
- 必要に応じて、Resize、Crop、またはFlipツールを使用して画像を調整します。
- Saveをクリックします。
カードアクション
実験カードのthree-dots menuをクリックして、次の操作を行います:- Results: 実験のResults pageを開きます。
- Add to favorites: 実験をお気に入りとしてマークします。
実験の詳細
実験カードをクリックすると、詳細ビューが開きます。詳細ビューは、What was testedセクションから始まり、その後に実験のAI Insightsセクションと、折りたたみ可能なCampaign OverviewセクションとCommentsセクションが続きます。
What was tested
What was testedセクションでは、実験が訪問者に対して行った変更が平易な言葉で説明されます。説明文はAIが作成します。結果を確認する前に説明文を読んで、テストで何が変更されたかを確認してください。
詳細ビューのAI insights
AI Insightsセクションには、実験の所見が箇条書きで表示されます。各所見は、コンバージョン率、収益、数量などの主要メトリクスの変化を、その変化のアップリフトと信頼性（パーセント表示）とともに説明します。メトリクスを改善するアップリフトの値は緑色で、低下は赤色で表示されます。Campaign Overview
Campaign Overviewをクリックすると、実験の追加メタデータを含むセクションが展開されます:- Duration
- Target
- Primary goal
- Result
- Primary goal uplift
- Status
- Type
- Creator
ナビゲーション
詳細ビューの上部にある矢印ボタンを使用して、前または次の実験に移動します。詳細ビューでの操作
詳細ビューでは、次の操作を実行できます:- Open Results pageをクリックすると、実験の完全なResults pageに移動します。
- three-dots menu > Resultsをクリックして、Results pageを開きます。
- three-dots menu > Add to favoritesをクリックして、実験をお気に入りとしてマークします。
Comments
Commentsセクションを使用して、実験結果についてチームと共同作業します。コメントを追加するには:- Addをクリックして、コメントのテキストフィールドを開きます。
- コメントを入力します。**@**を使用して、チームメンバーをメンションします。
- Saveをクリックして、コメントを投稿します。