成功した多変量テスト ​ アクティビティに必要なトラフィックの見積もり traffic-estimator

このページで: Traffic Estimator​を使用して、多変量テスト アクティビティが成功するのに十分なトラフィックを持っているかどうかを確認する方法を説明します。

多変量テストは複数のエクスペリエンスを比較するため、有意義な結果を得るためにどれだけのトラフィックが必要かを把握することが重要です。 トラフィック見積もり​では、ページとテスト中のエクスペリエンスの数に関する統計を使用して、テストを成功させるために必要なトラフィック量とテスト期間を見積もります。 また、成功するために設計したテストに十分なトラフィックがあるかどうかを確認するためのフィードバックも提供されます。

Traffic Estimator​は、以下を確実にするために必要なサンプルサイズを予測します。

  • 95%の信頼性。 この統計は、実際の上昇率がない場合に偽陽性を報告する可能性が5% (100% – 信頼性レベル)であることを意味します。
  • 80%の統計的検出力。 この統計は、テストが25%以上の真のリフトを検出する80%の確率を持っていることを意味します。
  • 25%以上の信頼性検出可能な上昇率。 Targetは、80%の可能性で25%以上の真のリフトを検出するために必要なトラフィック量を計算します。

このテストでは、ボンフェローニ補正を使用して、多重比較の補正をおこないます。 この方法は保守的な方法として知られていますが、確実に検出可能な最低上昇率を比較的大きく設定することで、バランスをとることができます。

Traffic Estimatorの使用 use-traffic-estimator

多変量テスト​をデザインする際、トラフィック見積もり​を使用すると、テストするエクスペリエンスの数に対して、ページへのトラフィックが十分かどうかを確認できます。 テストを開始する前にこのチェックを実行すると、意味のある結果を生成するのに十分な訪問者に到達できないテストを回避できます。また、トラフィックが十分でない場合の組み合わせ数またはテストの期間を調整する方法を示します。

  1. 多変量 アクティビティの​ Visual Experience Composer ​の​エクスペリエンス ページで、ページの左上隅にある​トラフィック アイコン ( ​ トラフィック見積もりアイコン ​ )をクリックします。

    Traffic Estimator​が開きます。 非表示にするには、もう一度アイコンをクリックします。

    Traffic Estimator ユーザーインターフェイス ​

    Traffic Estimator​の上部付近で、入力した値が計算され、結果が表示されます。

  2. (オプション)一般的なコンバージョン率、1日あたりの推定訪問者数、テスト期間を指定します。

    Traffic Estimator​は、これらの統計を使用して、テストを成功させるために必要な調整を決定します。

    table 0-row-2 1-row-2 2-row-2 3-row-2 4-row-2
    指標 説明
    コンテンツの組み合わせ数 この指標は、除外後、アクティビティの一部として作成されたエクスペリエンスの数に基づいて自動的に計算されます。
    一般的なコンバージョン率 この指標は、見積もりや分析システムからの過去のデータにもとづいて、パーセントで表されます。
    1日あたりの推定訪問者数 ターゲティング基準をもとに、このページを閲覧する可能性の高い訪問者の数を指します。 この数値は分析データにもとづく可能性があります。
    テスト期間 アクティビティを実行する日数。
  3. 結果の検証: 数値を変更すると、見積もりも変更されます。

    例えば、多数のエクスペリエンスをテストしており、コンバージョン率とインプレッション率が低すぎる場合、トラフィック見積もり​には、テストを成功させるために実行する必要がある期間が表示されます。 または、トラフィックが少ない場合は、Traffic Estimator​でエクスペリエンスの数が少ないことが示され、必要な日数のテストを実行できます。

  4. 十分なトラフィックがない場合は、次のいずれかまたは両方を実行します。

    • オファーの組み合わせの数、および場所の数を減らします。
    • テスト期間を長くします。
  5. Traffic Estimator​で十分なトラフィックがあることが示されるまで数値を調整し、それに応じてテストを設計します。

recommendation-more-help
target-help-main