コンテンツ実験の作成 content-experiment

コンテンツ実験について about-content-experiment

Adobe Campaign Web でのコンテンツ実験では、ターゲットオーディエンスに最適なパフォーマンスを発揮する製品を測定するために、複数の A/B テスト用の配信バリアントを定義できます。 配信コンテンツ、件名または送信者を変更して、様々なバージョンをテストし、どのバリアントが最適な結果を生み出すかを決定できます。

次のような様々なメール要素に対して A/B テストを実行できます。

  • 件名:様々なメールの件名をテストして、最も高い開封率を生み出すメールを確認します
  • 送信者名:様々な送信者の組み合わせを試す
  • メール本文コンテンツ:複数のコンテンツバージョンを作成して、最もクリックスルー率の高いコンテンツを特定します
NOTE
  • コンテンツ実験は現在、メールチャネルでのみ使用できます。
  • A/B テストは、トランザクションメッセージではサポートされていません。
  • 実験あたり最大 3 つの処理(バリアント)。

コンテンツ実験を作成 create-content-experiment

メール配信にコンテンツ実験を追加するには、次の手順に従います。

  1. メール配信を作成するか、既存のドラフト配信を開きます。 ​ 詳しくは、メールの作成方法を参照してください ​

  2. メール配信プロパティページで、「コンテンツ セクションにある「実験を作成 ボタンをクリック ます。

    ​ メールプロパティの「実験を作成」ボタンを示すスクリーンショット ​ {modal="regular"}

実験の設定 configure-experiment

次のセクションを使用して実験を設定します。

​ 実験の設定を示したスクリーンショット ​ {modal="regular"}

オーディエンス設定 audience-settings

実験のバリアントを受け取るターゲット母集団の割合を定義します。

オーディエンスサイズを設定する値を入力します。 これは、テストフェーズで実験バリアントの 1 つを受け取る受信者の割合を表します。

  • 最小:1%
  • 最大:100%
  • デフォルト:10%

実験が終了して勝者が決定されると、残りのオーディエンス(デフォルトでは 90%)に勝者バリアントが届きます。

例えば、ターゲットオーディエンスが 10,000 人の受信者で、オーディエンスサイズが 10% の場合、実験に参加する 1,000 人の受信者がランダムに選択されます。 残りの 9,000 人の受信者には、実験が終了した後に勝者のバリアントが届きます。

成功戦略 winning-strategy

勝者バリアントの決定に使用する指標を選択します。

  • 最適な開封率 (デフォルト):メールの開封率が最も高いバリアントが勝ちます
  • ベストクリックスルー率:メールのクリック率が最も高いバリアントが勝ちます
  • 登録解除率が最も低い:登録解除の割合が最も低いバリアントが勝ちます

システムは実験中にこれらの指標を自動的に追跡し、選択した条件に応じて最もパフォーマンスの高いバリアントを計算します。

勝者の送信方法 sending-method

実験の実行期間を定義し、送信方法を選択します。

  1. 期間の値を時間単位で入力します。 この実験は、勝者バリアントを決定する前に、この期間にわたって実行されます。

    • 最小:3 時間
    • 最大:240 時間(10 日)
    • デフォルト:24 時間
    note note
    NOTE
    有意義なデータを収集するのに十分な長さの実験期間を確保します。 特に、蓄積に時間がかかる可能性のあるクリックスルー率などの指標の場合、期間が短いと、十分な統計的有意性が得られない可能性があります。
  2. 勝者バリアントを残りの母集団に送信する方法を選択:

    • 自動送信 有効:実験が終了すると、システムは勝者バリアントを残りのオーディエンスに自動的に送信します。
    • 自動送信 非アクティブ:実験結果を確認した後、手動で 送信 ボタンをクリックして勝者バリアントを送信する必要があります。

実験の終了時までに、どのバリアントも他のバリアントよりも大幅に優れた結果を達成しない場合、システムは最初のバリアントを残りの母集団に送信します。 このを参照してください。

コンテンツ処理の定義 define-content

実験設定を保存すると、デフォルトで最初の処理が作成されます。 次に、他の処理(最大 3 つ)を追加し、その特定のコンテンツを定義する必要があります。

  1. 配信プロパティで、「コンテンツを編集」をクリックします。 処理は左側に表示されます。

    ​ コンテンツ実験パネルを示したスクリーンショット ​ {modal="regular"}

  2. 処理を追加」ボタンをクリックし、名前を定義します。 追加する必要があるすべての処理に対して、この操作を繰り返します。 その後、名前を変更し、複製して削除できます。

  3. 各処理をクリックし、次の項目をカスタマイズします。

    • 送信者名:メールの送信者をカスタマイズします
    • 件名:各処理の一意の件名を書きます
    • メール本文:メールDesignerを使用して、様々なコンテンツバージョンをデザインする

    ​ 複数の処理を示したスクリーンショット ​ {modal="regular"}

  4. 処理をクリックし、「コンテンツをシミュレート」をクリックして、各処理をプレビューします。

実験を開始し、結果を監視する validate-start

すべてのコンテンツ処理を定義したら、実験を検証して開始できます。

  1. 配信プロパティで「確認して送信」をクリックし、「準備」をクリックします。

  2. 次に、「実験を開始」をクリックして、A/B テストを開始します。

    ​ 「実験を開始」ボタンを示したスクリーンショット ​ {modal="regular"}

  3. 実験が実行されたら、配信ダッシュボードに表示される様々な指標を監視します。

実験を実行中に、「送信を停止」をクリックして実験を終了できます。 また、「選択して勝者に送信 をクリックして、実験が終了する前に手動で送信することもできます。

NOTE
受信者がメールとやり取りする際に、結果がほぼリアルタイムで更新されます。 ただし、初期の結果には統計的有意差がない場合があります。実験期間が完了するまで待ってから最終的な決定を行うことをお勧めします。

配信の送信 send-deliveries

送信は、「勝者の送信方法 設定で選択した内容に応じて、自動または手動で実行でき す。 このを参照してください。

自動送信 automatic-sending

自動送信の場合、システムは勝者戦略に基づいて結果を分析し、勝者処理を決定します。 勝者処理は、残りのオーディエンスに自動的に送信されます。 明確な勝者が発生しなかった場合は、最初のバリアントが選択されます。

手動での送信 manual-sending

手動送信を設定した場合は、実験が終了した時点で結果を確認し、「送信」をクリックして勝者処理を送信します。 明らかな勝者が出現しなかった場合は、デフォルトで最初の処理が選択されますが、別の処理を選択することもできます。

最終結果の表示 final-results

実験が完了し、配信が完全に送信されたら、包括的なレポートにアクセスできます。

  1. 配信ダッシュボードで、「レポート」をクリックします。

  2. 実験 レポート」タブに移動して、各処理の主要パフォーマンス指標を表示します。

ベストプラクティス best-practices

コンテンツ実験を作成する際は、次の推奨事項を考慮してください。

  • 一度に 1 つの要素をテスト:より明確な結果を得るには、複数の要素を同時にテストするのではなく、単一の要素(件名のみ、コンテンツのみ)のバリエーションをテストします。

  • 適切な期間を選択:統計的優位差に十分な時間を確保します。

    • 開封率テストの場合:通常は 12~24 時間で十分です
    • クリックスルー率テストの場合:24~48 時間以上が必要になる場合があります
    • 大きなオーディエンスの方が必要な時間は短く、小さなオーディエンスの方が必要な時間は長くなります
  • オーディエンスのサイズを適切に設定:

    • 実験オーディエンス(テストに割り当てられた割合)が、意味のある結果を生み出すのに十分な大きさであることを確認します
    • 一般的なガイドライン:信頼性の高い結果を得るには、処理あたり最小 1,000 人の受信者
  • 定期的にテストしますが、過度にはテストしません:重要なキャンペーンに関する実験を実施しますが、影響の大きい決定にリソースを集中させるために、すべての送信をテストすることは避けます。

  • 知識の文書化:実験結果の記録を保持して、将来のキャンペーン戦略に役立てます。

recommendation-more-help
c39c2d00-ba9a-424b-adf9-66af58a0c34b