Multivariate Test アクティビティを成功させるために必要なトラフィックの見積もり
多変量分析テストでは複数のエクスペリエンスを比較するので、有意な結果を得るためにはどの程度のトラフィックが必要かを把握しておくことが重要です。トラフィック見積もり機能は、ページに関する統計情報とテスト中のエクスペリエンスの数に基づいて、テストを正常に完了させるために必要なトラフィック数とテスト期間を見積もります。
トラフィック見積もりでは、次の条件を満たすために必要なサンプルのサイズを予測します。
- 95% の信頼性。 この統計は、実際の上昇率がない場合に偽陽性とレポートされる可能性が 5% （100% – 信頼性レベル）であることを意味します。
- 80% の統計的検出力。 この統計は、テストが 25% 以上の真の上昇率を検出する確率が 80% であることを意味します。
- 25% 最小で確実に検出可能な上昇率。 Target は、真の上昇率が 25% 以上と 80% の確率を検出するために必要なトラフィック量を計算します。
このテストでは、ボンフェローニ補正を使用して、多重比較の補正をおこないます。この方法は保守的な方法として知られていますが、確実に検出可能な最低上昇率を比較的大きく設定することで、バランスをとることができます。
また、トラフィック見積もりでは、設計したテストが成功するために十分なトラフィックがあるかどうかについてのフィードバックも提供されます。
-
Visual Experience Composer ールバーで「Traffic」アイコンをクリックします。
トラフィック見積もりが表示されます。Traffic アイコンをもう一度クリックすると、トラフィック見積もりを非表示にすることができます。
-
「標準的なコンバージョン率」、「推定訪問者数（日単位）」、「テスト期間」を入力します。
- Number of Content Combinations：除外の後にアクティビティの一部として作成されるエクスペリエンスの数に基づいて自動的に計算されます。
- Typical Conversion Rate：コンバージョン率は、Analytics システムからの推定または過去のデータに基づいてパーセンテージで表されます。
- Estimated Visitors Per Day：ターゲティング条件に基づいて、このページを表示する可能性が高い訪問者の数です。 この数値は、分析データに基づいて決定することができます。
- Test Duration：アクティビティを実行する日数。
トラフィック見積もりでは、これらの統計情報を使用して、テストの実行を成功させるために必要な調整の内容を特定します。
トラフィック見積もりの上部付近に、入力した値に基づく計算結果が表示されます。
数値を変更すると、見積もりも変更されます。例えば、多くのエクスペリエンスをテストし、コンバージョン率とインプレッション数が低すぎる場合、テストを成功させるためには、トラフィック見積もりを実行する必要があり、その期間は表示されません。 トラフィック量が非常に低い場合、トラフィック見積もりは、テストの実行期間を希望の日数に抑えるため、エクスペリエンスの数を減らすよう提案することもあります。
十分なトラフィックがない場合は、次のいずれかまたは両方をおこなうことができます。
- オファーの組み合わせの数、および場所の数を減らします。
- テスト期間を長くします。
十分なトラフィックが確保されるという評価が得られるまで数字を調整し、それに応じて、テストをデザインします。
