自動配分の概要

An 自動配分 アクティビティ Adobe Target では、2 つ以上のエクスペリエンスの中から勝者を特定し、自動的にその勝者に配分するトラフィックを増やすことでコンバージョンを促進します。その間もテストによる学習は続けられます。

3 ステップのガイドによるワークフローを使用して A/B アクティビティを作成する際に、 最良のエクスペリエンスに自動配分 オプション。

課題

標準的な A/B テストには、固有のコストがあります。各エクスペリエンスのパフォーマンスを測定するためにトラフィックを費やす必要があり、分析を通じて勝者エクスペリエンスを見つけ出す必要があります。トラフィックの配分は、一部のエクスペリエンスが他よりもパフォーマンスに優れているとわかった後でも、固定されたままです。また、サンプルサイズの計算が複雑で、アクティビティは、勝者に対して働きかけられるようになる前に全コースを実行する必要があります。また、特定された勝者が真の勝者でない可能性もあります。

解決策： 自動配分

自動配分は、このコストおよび勝者エクスペリエンスの判別のオーバーヘッドを削減します。自動配分では、すべてのエクスペリエンスの目標指標パフォーマンスを監視し、パフォーマンスの高いエクスペリエンスに、パフォーマンスの高さに応じて多くの新規参加者を送ります。他のエクスペリエンスを調査するのに十分なトラフィックが予約されます。学習と平行してアクティビティの最適化を実行中であっても、結果に対するテストのメリットを確認できます。

自動配分は、アクティビティが終了して勝者が決まるまで待たずに、訪問者を徐々に勝者エクスペリエンスに近づけます。成功していないエクスペリエンスに送られたアクティビティ参加者は勝者エクスペリエンスの可能性を示しているので、より迅速に上昇するメリットが得られます。

での通常の A/B テスト Target は、対抗と対照の一対比のみを表示します。 例えば、アクティビティにエクスペリエンスがある場合は、次のようになります。A、B、C、D（A は制御、通常） Target A/B テストでは、A 対 B、A 対 C、A 対 D が比較されます。

このようなテストでは、 Target、 ウェルチ t 検定p 値ベースの信頼性を生成する場合は 。 その後、この信頼値を使用して、対抗が対照と十分に異なるかどうかを特定します。しかし、 Target は、「最良」のエクスペリエンスを見つけるために必要な暗黙の比較（B と C、B と D、C と D）を自動的に実行しません。 その結果、マーケティング担当者は、「最良の」エクスペリエンスを判断するために結果を手動で分析する必要があります。

自動配分は、エクスペリエンス全体に対してすべての暗黙の比較を実行し、「真」の勝者を見つけます。このテストには「対照」エクスペリエンスという概念がありません。

自動配分 最良のエクスペリエンスの信頼区間が他のエクスペリエンスの信頼区間と重複しなくなるまで、新しい訪問者をエクスペリエンスにインテリジェントに配分します。 通常、このプロセスで偽陽性が生成される可能性がありますが、 自動配分 は、 ベルンシュタインの不等式 繰り返された評価を補正する この時点で、真の勝者が存在します。 条件 自動配分 が停止し、ページに到達する訪問者に大きな時間依存性がない場合、少なくとも 95%の確率でが発生します。 自動配分 真の応答が勝者エクスペリエンスの真の応答よりも 1%（相対）も低いエクスペリエンスを返します。

使用するタイミング 自動配分 と A/B または Automated Personalization

• アクティビティを最初から最適化して、なるべく早く勝者エクスペリエンスを特定したい場合に、自動配分​を使用します。パフォーマンスの高いエクスペリエンスをより頻繁に提供することで、アクティビティ全体のパフォーマンスを向上させます。
• サイトを最適化する前に、すべてのエクスペリエンスのパフォーマンスの特性を明らかにしたい場合に、標準的な A/B テスト​を使用します。A/B テストを使用すると、すべてのエクスペリエンスをランク付けできます。 自動配分 は、上位のパフォーマンスを見つけますが、下位のパフォーマンス間での差別化を保証しません。
• 用途 Automated Personalization 個々のプロファイル属性に基づいて予測を構築する機械学習モデルなど、複雑さが最も高い最適化アルゴリズムが必要な場合。 自動配分 では、（標準の A/B テストと同様に）エクスペリエンスの集計行動を調べ、訪問者を区別しません。

主なメリット

• A/B テストの正確性を保持する
• 統計的に有意な勝者を手動の A/B テストよりも早く見つける
• 手動の A/B テストよりも高い平均キャンペーン上昇率を提供する

用語

次の用語は、 自動配分:

マルチアームバンディット：マルチアームバンディットは、調査学習とその学習の活用のバランスを最適化するためのアプローチです。

アルゴリズムの仕組み

背後にある全体的なロジック 自動配分 は、累積データの測定されたパフォーマンス（コンバージョン率など）と信頼区間の両方を組み込みます。 トラフィックがエクスペリエンス間で均等に分割される標準的な A/B テストとは異なり、 自動配分 エクスペリエンス間のトラフィックの配分を変更します。

• 訪問者の 80％は、以下に説明するインテリジェントロジックを使用して配分されます.
• 訪問者の 20％は、変化する訪問者の行動に対応するために、すべてのエクスペリエンスにランダムに配分されます。

マルチアームバンディットアプローチでは、パフォーマンスの良いエクスペリエンスを活用している間も、一部のエクスペリエンスを自由に調査できるようにしておきます。変化する状況に対応する能力を維持しながら、より多くの新規訪問者がパフォーマンスのより優れたエクスペリエンスに配置されます。最新のデータを反映するために、これらのモデルは少なくとも 1 時間に 1 回更新されます。

より多くの訪問者がアクティビティに入るにしたがって、一部のエクスペリエンスの成功率が向上し始め、より多くのトラフィックが成功エクスペリエンスに送られます。すべてのエクスペリエンスを調査するために、トラフィックの 20％が、引き続きランダムに配分されます。パフォーマンスの低いエクスペリエンスの 1 つのパフォーマンスが向上し始めると、そのエクスペリエンスに配分されるトラフィックが増えます。一方、パフォーマンスの高いアクティビティの成功率が低下すると、そのエクスペリエンスに配分されるトラフィックは少なくなります。例えば、あるイベントが原因で訪問者がサイト上で異なる情報を期待している場合と小売サイトで週末セールを期待している場合で、異なる結果が提供されます。

次の図に、4 つのエクスペリエンスを扱うテストでこのアルゴリズムがどのように実行されるかを示します。

この図は、明確な勝者が決定されるまで、複数ラウンドのアクティビティの有効期間にわたって各エクスペリエンスに配分されるトラフィックがどのように変化するかを示しています。

ラウンド数	説明
	ウォームアップラウンド（0）: ウォームアップラウンドでは、アクティビティの各エクスペリエンスが最低1,000人の訪問者と50個のコンバージョンを持つまで、各エクスペリエンスのトラフィック配分が均等になります。 エクスペリエンス A=25 ％ エクスペリエンス B=25 ％ エクスペリエンス C=25 ％ エクスペリエンス D=25 ％ 各エクスペリエンスで訪問者が 1,000 人、コンバージョンが 50 回に達すると、Target はトラフィックの自動配分を開始します。数ラウンドですべての配分が発生し、各ラウンドごとに 2 つのエクスペリエンスが選出されます。 次のラウンドに進むのは、2 つのエクスペリエンスのみです。D と C 次に進むと、2 つのエクスペリエンスに均等にトラフィックの 80%が配分されます。他の 2 つのエクスペリエンスは引き続き参加しますが、新規訪問者がアクティビティに入ると、20%のランダムトラフィック配分の一部としてのみ機能します。 すべての配分は 1 時間ごとに更新されます（上記の x 軸のラウンド数で示されています）。各ラウンドの後、累積データが比較されます。
	ラウンド1: このラウンドでは、トラフィックの80%がエクスペリエンスCおよびD（それぞれ40%のエクスペリエンス）に配分されます。トラフィックの 20％がエクスペリエンス A、B、C および D にランダムに配分されます（5％ずつ）。このラウンドでは、エクスペリエンス A のパフォーマンスが優れています。 アルゴリズムにより、（各アクティビティの垂直スケールのが示しているように）コンバージョン率が最も高いという理由で、エクスペリエンス D が選出され、次のラウンドに進みます。 アルゴリズムにより、残りのエクスペリエンスでベルンシュタインの 95％信頼区間の上限が最も高いという理由で、エクスペリエンス A も選出され、次に進みます。 エクスペリエンス D と A が次に進みます。
	ラウンド2: このラウンドでは、トラフィックの80%がエクスペリエンスAおよびD（それぞれ40%のエクスペリエンス）に配分されます。トラフィックの 20％がランダムに配分されます。つまり、エクスペリエンス A、B、C および D のそれぞれがトラフィックの 5％を獲得します。このラウンドでは、エクスペリエンス B のパフォーマンスが優れています。 アルゴリズムにより、（各アクティビティの垂直スケールのが示しているように）コンバージョン率が最も高いという理由で、エクスペリエンス D が選出され、次のラウンドに進みます。 アルゴリズムにより、残りのエクスペリエンスでベルンシュタインの 95％信頼区間の上限が最も高いという理由で、エクスペリエンス B も選出され、次に進みます。 エクスペリエンス D と B が次に進みます。
	ラウンド3: このラウンドでは、トラフィックの80%がエクスペリエンスBとD（それぞれ40%のエクスペリエンス）に配分されます。トラフィックの 20％がランダムに配分されます。つまり、エクスペリエンス A、B、C および D のそれぞれがトラフィックの 5％を獲得します。このラウンドでは、エクスペリエンス D が引き続きパフォーマンスが優れ、エクスペリエンス C もパフォーマンスが優れています。 アルゴリズムにより、（各アクティビティの垂直スケールのが示しているように）コンバージョン率が最も高いという理由で、エクスペリエンス D が選出され、次のラウンドに進みます。 アルゴリズムにより、残りのエクスペリエンスでベルンシュタインの 95％信頼区間の上限が最も高いという理由で、エクスペリエンス C も選出され、次に進みます。 エクスペリエンス D と C が次に進みます。
	ラウンド4: このラウンドでは、トラフィックの80%がエクスペリエンスCおよびD（それぞれ40%のエクスペリエンス）に配分されます。トラフィックの 20％がランダムに配分されます。つまり、エクスペリエンス A、B、C および D のそれぞれがトラフィックの 5％を獲得します。このラウンドでは、エクスペリエンス C のパフォーマンスが優れています。 アルゴリズムにより、（各アクティビティの垂直スケールの が示しているように）コンバージョン率が最も高いという理由で、エクスペリエンス C が選出され、次のラウンドに進みます。 アルゴリズムにより、残りのエクスペリエンスでベルンシュタインの 95％信頼区間の上限が最も高いという理由で、エクスペリエンス D も選出され、次に進みます。 エクスペリエンス C と D が次に進みます。
	ラウンド n：アクティビティが進むにつれて、パフォーマンスの高いエクスペリエンスが現れ始め、勝者エクスペリエンスが現れるまでプロセスが継続されます。コンバージョン率が最も高いエクスペリエンスの信頼区間が他のエクスペリエンスの信頼区間と重複しない場合、そのエクスペリエンスには勝者というラベルが付けられます。 A 勝者アクティビティのページにバッジが表示されます そして アクティビティ リスト。 アルゴリズムにより、エクスペリエンス C が明確な勝者として選出されます この時点で、アルゴリズムにより、トラフィックの 80％がエクスペリエンス C に配分され、トラフィックの 20％が、引き続きすべてのエクスペリエンス（A、B、C および D）にランダムに配分されます。後継で、C はトラフィックの 85％を獲得します。万一、勝者の信頼区間が再び重複し始めた場合、アルゴリズムにより、前述のラウンド 4 の動作に戻されます。 重要: プロセスの前の推奨結果を手動で選択すると、誤ったエクスペリエンスを選択できます。このため、アルゴリズムが勝者エクスペリエンスを決定するまで待つことをお勧めします。

次の後： 自動配分 アクティビティがアクティブ化されている場合、UI からの次の操作は許可されません。

• 「トラフィック配分」モードから「手動」への切り替え
• 目標指標タイプの変更
• 「詳細設定」パネルでのオプションの変更

自動配分の仕組みを見る

詳しくは、 自動配分を使用すると、手動のテストよりも迅速なテスト結果と高い売上高を得ることができます

注意事項

この 自動配分 機能は、1 つの詳細指標設定でのみ機能します。 カウントを増分、アクティビティでユーザーを保持

次の詳細指標設定はサポートされていません。 カウントを増分, リリースユーザ, 再入場を許可し、カウントを増分、および 再入場を許可しないユーザーとバーをリリース.

頻繁な再訪問者は、エクスペリエンスのコンバージョン率を水増しさせる可能性があります。

エクスペリエンス A を表示した訪問者が頻繁に再訪し、複数回のコンバージョンをおこなうと、エクスペリエンス A のコンバージョン率（CR）は、人為的に増加します。この結果を、訪問者がコンバージョンしたが頻繁に再訪しないエクスペリエンス B と比較します。 その結果、エクスペリエンス A の CR はエクスペリエンス B の CR よりも見た目が良いので、新しい訪問者は A に割り当てられる可能性が高くなります。参加者ごとに 1 回カウントする場合、A の CR と B の CR は同じになります。

再訪問者がランダムに配分されると、そのコンバージョン率への影響は、より安定する傾向があります。この効果を軽減させるには、目標指標のカウント方法を参加者あたり 1 回のみに変更することを検討します。

パフォーマンスの低いものからではなく、パフォーマンスの高いものから区別する。

自動配分は、パフォーマンスの高いエクスペリエンスの間で区別する（そして勝者を見つける）のが得意です。パフォーマンスの低いエクスペリエンスの間での十分な区別がないこともあり得ます。

すべてのエクスペリエンスで統計的に有意な差異を生み出す場合は、手動のトラフィック配分モードの使用を検討する必要があります。

時間相関のある（または文脈が変化する）コンバージョン率は、配分量をゆがめる可能性がある。

すべてのエクスペリエンスに等しく影響するので、標準の A/B テストで無視できる要因は、 自動配分 テスト。 そのアルゴリズムは、観測されたコンバージョン率に敏感です。次に、エクスペリエンスのパフォーマンスに不平等に影響する可能性のある要因の例を示します。

• 状況（時間、場所、性別など）が異なるエクスペリエンス。

  次に例を示します。

  • 「花の金曜日」は、金曜日に高いコンバージョンをもたらす
  • 「月曜日からジャンプスタート」は、月曜日にコンバージョンが高くなる
  • 「東海岸の冬に備える」は、東海岸または冬が苦しむ場所でより高いコンバージョンを提供します

状況に応じて関連性の異なるエクスペリエンスを使用すると、結果が 自動配分 A/B テストは長期間の結果を分析するので、A/B テストよりもテストの方が多くなります。

• おそらくメッセージの緊急性のために、コンバージョンの遅延が変化するエクスペリエンス。

  例えば、「30％セールは本日限り」は、訪問者に本日コンバージョンさせるきっかけになりますが、「初回購入は50％オフ」は、緊急性において同じ感覚を生みません。

よくある質問

を使用する際は、次の FAQ と回答を参照してください 自動配分 アクティビティ：

実行 Analytics for Target (A4T) サポート 自動配分 アクティビティ？

はい。詳しくは、自動配分と自動ターゲットアクティビティに対する A4T のサポートを参照してください。

再訪問者は、自動的にパフォーマンスの高いエクスペリエンスに再配分されますか？

いいえ。新規訪問者のみが自動的に配分されます。A/B テストの有効性を保護するために、再訪問者は引き続き元のエクスペリエンスを確認します。

アルゴリズムでは、偽陽性をどのように扱いますか？

勝者バッジが表示されるまで待った場合、アルゴリズムは 95 ％の信頼性または 5 ％の偽陽性率を保証します。

その条件 自動配分 トラフィックの配分を開始しますか？

アクティビティのすべてのエクスペリエンスに 1,000 人以上の訪問者と 50 回以上のコンバージョンがあれば、アルゴリズムが機能し始めます。

アルゴリズムは、どれくらい積極的に活用しますか？

トラフィックの 80%が 自動配分 トラフィックの 20%がランダムに提供されます。 勝者が特定されると、トラフィックの 80％すべてが勝者に配分され、20％の一部が勝者エクスペリエンスを含むすべてのエクスペリエンスに引き続き配分されます。

そもそも失敗エクスペリエンスは表示されますか？

はい。マルチアームバンディットでは、すべてのエクスペリエンスにわたる変更のパターンまたはコンバージョン率を調査するために、トラフィックの少なくとも 20 ％が予約されます。

長時間のコンバージョンの遅延があるアクティビティはどうなりますか？

最適化されたすべてのエクスペリエンスが同じ遅延に直面する限り、動作は、より高速なコンバージョンサイクルのアクティビティと同じです。ただし、トラフィック配分処理が開始されるまでに、50 のコンバージョンしきい値に達するまでに時間がかかります。

の仕組み 自動配分 ～とは異なる Automated Personalization?

自動パーソナライゼーションは、各訪問者のプロファイル属性を使用して、最良のエクスペリエンスを判定します。その際に、そのユーザーのアクティビティを最適化するだけでなく、パーソナライズします。

自動配分一方、は、勝者全体（最も人気のあるエクスペリエンスですが、必ずしも各訪問者にとって最も効果的なエクスペリエンスとは限りません）を生成する A/B テストです。

再訪問者は、成功指標のコンバージョン率を水増しさせますか？

現在、ロジックは、コンバージョンが迅速な訪問またはより頻繁な訪問をおこなう訪問者を優先します。これは、その訪問者が属するエクスペリエンスの全体的なコンバージョン率を一時的に水増しするからです。 アルゴリズム自体は頻繁に調整されるので、コンバージョン率の増加は、各スナップショットで増幅されます。サイトに多数の再訪問者が訪れた場合、そのコンバージョンによって、その訪問者が属するエクスペリエンスの全体的なコンバージョン率が水増しされる可能性があります。 再訪問者がランダムに配分される可能性は高く、この場合、集計の効果（増加した上昇率）は安定します。この効果を軽減させるには、成功指標のカウント方法を参加者あたり 1 回のみに変更することを検討します。

サンプルサイズ計算ツールは、 自動配分 アクティビティでの勝者の特定にかかる時間を見積もるには、どうすればよいですか？

既存の Adobe Target サンプルサイズ計算ツール をクリックして、テストの実行時間を予測します。 （従来の A/B テストと同様に、2 つ以上のオファーや複数のコンバージョン指標/仮説をテストする場合は、ボンフェローニ補正を適用します）。 この計算ツールは、従来の固定地平線 A/B テスト用に設計されており、見積もりのみを提供します。 計算ツールを使用した 自動配分 アクティビティはオプションです。 自動配分 が勝者を宣言します。 テスト結果を見るために、特定の時点を選択する必要はありません。 指定された値は、常に統計的に有効です。

実験では、次のことが見つかりました。

• 2 つのエクスペリエンスをテストする場合、 自動配分 エクスペリエンス間のパフォーマンスの違いが大きい場合に、固定範囲テスト（サンプルサイズ計算ツールで提案される期間）よりも迅速に勝者を見つけます。 しかし、 自動配分 エクスペリエンス間のパフォーマンスの違いが小さい場合、勝者を特定するのに余分な時間が必要になる場合があります。 この場合、通常、統計的に有意な結果が得られずに、固定地平線テストは終了していました。
• 2 つ以上のエクスペリエンスをテストする場合、 自動配分 は、1 つのエクスペリエンスが他のすべてのエクスペリエンスのパフォーマンスを強く下回る場合に、固定範囲テスト（サンプルサイズ計算ツールで提案される期間）よりも迅速に勝者を見つけます。 2 つ以上のエクスペリエンスの両方が、他のエクスペリエンスに対して「勝者」であり、互いに密接に一致している場合。 自動配分 どちらが優れているかを判断するのに余分な時間が必要になる場合があります。 この場合、通常、固定地平線テストは、「勝者」のエクスペリエンスがパフォーマンスの低いエクスペリエンスよりも優れているが、どちらが優れているかは特定されていないと結論付けることで終了しました。

パフォーマンスの低いエクスペリエンスを 自動配分 アクティビティを使用して、勝者を決定するプロセスを迅速化しますか？

パフォーマンスの低いエクスペリエンスを削除する理由は本当にありません。 自動配分 パフォーマンスの高いエクスペリエンスをより頻繁に提供し、パフォーマンスの低いエクスペリエンスをあまり提供しません。 パフォーマンスの低いエクスペリエンスをアクティビティに残しても、勝者を決定する速度に大きく影響しません。

訪問者の 20% は、すべてのエクスペリエンスにランダムに配分されます。パフォーマンスの低いエクスペリエンスに提供されるトラフィックの量は最小（20%をエクスペリエンス数で割った値）です。

目標指標を 自動配分 アクティビティ？

Adobe では、アクティビティの途中で目標指標を変更することはお勧めしません。 Target UI を使用したアクティビティ中に目標指標を変更することは可能ですが、常に新しいアクティビティを開始する必要があります。Adobe では、実行後にアクティビティの目標指標を変更した場合の動作は保証されません。

このレコメンデーションは、自動配分、自動ターゲット、Automated Personalization の各アクティビティで、レポートソースとしてTargetまたはAnalytics（A4T）を使用します。

自動配分アクティビティの途中で、レポートソースを変更できますか？

Adobe では、アクティビティの途中でレポートソースを変更することはお勧めしません。 レポートソースは Target （A4T へ、またはその逆へ） Target UI では、常に新しいアクティビティを開始する必要があります。 Adobe では、実行後にアクティビティのレポートソースを変更した場合の動作は保証されません。

このレコメンデーションは、自動配分、自動ターゲット、Automated Personalization の各アクティビティで、レポートソースとしてTargetまたはAnalytics（A4T）を使用します。

使用できる レポートデータをリセット オプションを使用して 自動配分 アクティビティ？

の使用 レポートデータをリセット オプション 自動配分 アクティビティは推奨されません。 表示されるレポートデータは削除されますが、このオプションを選択しても、 自動配分 モデル。 を使用する代わりに、 レポートデータをリセット オプション 自動配分 アクティビティを作成し、新しいアクティビティを作成して、元のアクティビティを非アクティブ化します。 ( このガイダンスは、 自動ターゲット および Automated Personalization アクティビティ )

方法 自動配分 環境に関するモデルを構築しますか？

自動配分 は、デフォルト環境でのみ記録されたトラフィックとコンバージョンの行動に基づいてモデルを構築します。 デフォルトでは、 実稼動 はデフォルトの環境ですが、デフォルトの環境は Target 管理/環境.

別の（デフォルト以外の）環境でヒットが発生した場合、デフォルト環境で観測されたコンバージョン動作に従ってトラフィックが分散されます。 そのヒットの結果（コンバージョンまたは非コンバージョン）は、レポート目的で記録されますが、 自動配分 モデル。

別の環境を選択すると、レポートにその環境のトラフィックとコンバージョンが表示されます。 レポートに対してデフォルトで選択される環境は、アカウント全体で選択されるデフォルトの環境です。 デフォルトの環境は、アクティビティごとに設定することはできません。

自動配分アクティビティでは、テストの過程でルックバックウィンドウを調整して、経時的なトレンドの変化を考慮することはできますか？

例えば、アクティビティで 9 月の訪問者データ（テストが開始された時期）を見るのではなく、トラフィックの配分方法を決定するために 12 月を考慮することはできますか？

いいえ、 自動配分 は、アクティビティ全体のパフォーマンスを考慮します。

自動配分では、訪問者がアクティビティの資格を得る際に閲覧したものとは異なる勝者エクスペリエンスを再訪問者に表示しますか？

自動配分 はと同じ理由でスティッキー判定を使用します。 A/B テスト アクティビティは定着です。 トラフィックの配分は、新規訪問者に対してのみ機能します。

トレーニングビデオ

以下のビデオは、この記事で説明する概念についてさらに詳しく説明しています。

アクティビティワークフロー - ターゲット設定（2:14）

このビデオには、トラフィック配分の設定に関する情報が含まれています。

• オーディエンスのアクティビティへの割り当て
• トラフィックの増減調整
• トラフィック配分方法の選択
• 様々なエクスペリエンスへのトラフィック配分

A/B テストの作成(8:36)

このビデオでは、Target で 3 ステップのガイドによるワークフローを使用して A/B テストを作成する方法を説明します。自動配分 の説明は 4:45 から始まります。

• での A/B アクティビティの作成 Adobe Target
• 手動分割または自動トラフィック配分によるトラフィックの配分

Business.Adobe.com リソース

Multi Armed Bandit Testing Ab Multivariate Testing Enterprise Governance Product Recommendations Mobile Optimization Website Optimization