Auto-Allocate總覽

Last update: Sat Jul 20 2024 00:00:00 GMT+0000 (Coordinated Universal Time)

主題：

Adobe Target中的Auto-Allocate活動會從兩個或多個體驗中識別獲勝者，並自動重新分配更多流量給獲勝者以增加轉換，同時測試會繼續執行和學習。

使用三步驟引導式工作流程建立A/B活動時，請在 Targeting 頁面上選擇 Auto-Allocate to best experience 選項（步驟2）。

挑戰 section_85D5A03637204BACA75E19646162ACFF

標準 A/B 測試有其固有成本。您必須耗費流量來測量每個體驗的效能，並透過分析來定奪勝出體驗。即使在您認定某些體驗勝過其他體驗之後，流量分布仍然固定。另外，很難決定樣本大小，必須等到活動執行完整個過程，您才能對獲勝者採取動作。此外，已識別的獲勝者仍有可能不是真正的獲勝者。

方案： Auto-Allocate section_98388996F0584E15BF3A99C57EEB7629

Auto-Allocate活動可減少決定成功體驗的成本與額外負荷。 Auto-Allocate會監視所有體驗的目標量度績效，並成比例地將更多新加入者傳送至表現優異的體驗。有足夠的流量保留來探索其他體驗。即使活動仍在執行，您也可以看到測試帶給結果的好處: 最佳化與學習同步進行。

Auto-Allocate會逐步將訪客推向成功體驗，而不是要求您等到活動結束再決定成功者。您會更快從提升中受益，因為原本安排到較差體驗的活動加入者會看到潛在的勝出體驗。

Target中的一般A/B測試只會顯示挑戰者與控制項的成對比較。例如，如果活動有體驗：A、B、C和D，其中A是控制項，則正常的Target A/B測試會比較A與B、A與C，以及A與D。

在此類測試中，大部分產品（包括Target）都使用Welch的t檢定來產生p值信賴度。接著，此信賴值用來判斷挑戰體驗與控制體驗是否明顯不同。不過，Target不會自動執行尋找「最佳」體驗所需的隱含比較（B對C、B對D、C對D）。因此，市場行銷人員必須手動分析結果，才能決定「最佳」體驗。

Auto-Allocate會跨體驗執行所有隱含的比較，並產生「真」贏家。測試中沒有「控制」體驗的概念。

Auto-Allocate會聰明地將新訪客配置給體驗，直到最佳體驗的信賴區間與任何其他體驗的信賴區間不重疊。這個程式通常會產生誤判，但Auto-Allocate會根據補償重複評估的Bernstein不等式來使用信賴區間。此時，就會有真正的贏家。當Auto-Allocate停止時，假設對到達頁面的訪客沒有顯著的時間相依性，則至少有95%的機會會Auto-Allocate傳回其真實回應不比成功體驗的真實回應差1% （相對）的體驗。

何時使用Auto-Allocate而非A/B Test或Automated Personalization活動 section_3F73B0818A634E4AAAA60A37B502BFF9

當您想要從一開始就最佳化您的活動並儘快識別成功體驗時，請使用 Auto-Allocate。透過更頻繁地提供高效能體驗，整體活動效能得以提升。
如果您想要在最佳化網站之前先表徵所有體驗的效能，請使用標準 A/B測試。 A/B測試可協助您對所有體驗進行排名，而Auto-Allocate會找出績效最佳的體驗，但無法保證區分績效較低的體驗。
當您想要最佳化最複雜演演算法時使用Automated Personalization，例如根據個人設定檔屬性建立預測的機器學習模型。 Auto-Allocate會檢視體驗的整體行為（如同標準A/B測試），不會區別訪客。

Auto-Allocate的主要優點 section_0913BF06F73C4794862561388BBDDFF0

保留 A/B 測試的的嚴謹度
比手動 A/B 測試更快找出統計意義上的顯著成功者
比手動 A/B 測試提供更高的平均促銷活動提升度

術語 section_670F8785BA894745B43B6D4BFF953188

討論Auto-Allocate時，下列字詞相當實用：

多臂吃角子老虎機： 最佳化的多臂吃角子老虎機方法可平衡探索學習和該學習的利用。

演演算法運作方式 section_ADB69A1C7352462D98849F2918D4FF7B

Auto-Allocate之後的整體邏輯同時包含測量到的效能（例如轉換率）和累積資料的信賴區間。不像標準A/B測試，流量在體驗之間平均分割，Auto-Allocate會變更跨體驗的流量分配。

80% 的訪客是透過下述的智慧型邏輯來分配。
20%的訪客會隨機指派到所有體驗，以因應不斷變化的訪客行為。

在利用表現良好的體驗時，多臂吃角子老虎機法會保留一些體驗以供探索。除了將更多的新訪客安排到表現較佳的體驗，仍然能夠隨情況變化而做出反應。這些模型至少每一小時更新一次，以確保模型是對最新資料做出反應。

隨著越多訪客進入活動，有些體驗會開始變得更成功，而更多流量會分配給成功體驗。20% 的流量會持續地隨機供應，以探索所有體驗。如果其中一個表現較差的體驗開始有較好的表現，則會分配更多流量給該體驗。或者，如果表現較佳的活動變得較不成功，則分配給該體驗的流量會變少。例如，若某事件促使訪客在您的媒體網站上尋找不同資訊，或您的零售網站上的週末銷售提供不同的結果。

下圖代表演演算法可能在測試期間對四個體驗（按一下以展開圖）的執行方式：

自動分配影像

圖中顯示分配給每個體驗的流量如何經歷活動期限的幾個回合而增加，直到確定完勝贏家為止。

四捨五入

說明

{width="200" modal="regular"}

熱身回合 (0): 在熱身回合期間，每個體驗會獲得相等的流量分配，直到活動中的每個體驗至少有 1,000 位訪客和 50 次轉換為止。

體驗 A=25%
體驗 B=25%
體驗 C=25%
體驗 D=25%

每個體驗獲得1,000位訪客和50次轉換後，Target就會開始自動流量分配。所有分配皆透過回合輪翻進行，每個回合會挑出兩個體驗。
只有兩個體驗會前進到下一個回合： D和C。
前進就表示這兩個體驗平均分配80%的流量。其他兩個體驗會持續參與，但只有在新訪客進入活動時，才會作為20%隨機流量分配的一部分提供。
所有分配每小時更新一次 (如沿著上面 x 軸的回合所示)。每個回合之後會比較累積資料。

{width="200" modal="regular"}

第 1 回合: 在此回合中，80% 的流量分配給體驗 C 和 D (各 40%)。20% 的流量隨機分配給 A、B、C、D (各 5%)。在此回合中，體驗 A 表現良好。

演演算法會挑選體驗D來進行下一個循環，因為它有最高的轉換率（如每個活動的垂直比例尺所指示）。
演算法還會挑選體驗 A 來前進，因為相較於剩餘的體驗，它的 Bernstein 95% 信賴區間上界最高。

體驗 D 和 A 會前進。

{width="200" modal="regular"}

第 2 回合: 在這個回合中，80%的流量會分配給體驗 A 和 D (各 40%)。20% 的流量會隨機分配，因此，這表示 A、B、C 和 D 每個都會獲得 5% 的流量。在此回合中，體驗 B 表現良好。

演演算法會挑選體驗D來進行下一個循環，因為它有最高的轉換率（如每個活動的垂直比例尺所指示）。
演算法還會挑選體驗 B 來前進，因為相較剩餘的體驗，它的 Bernstein 95% 信賴區間上界最高。

體驗 D 和 B 會前進。

{width="200" modal="regular"}

第 3 回合: 在這個回合中，80%的流量會分配給體驗 B 和 D (各 40%)。20% 的流量會隨機分配，因此，這表示 A、B、C 和 D 每個都會獲得 5% 的流量。在此回合中，體驗 D 持續表現良好，體驗 C 也表現良好。

演演算法會挑選體驗D來進行下一個循環，因為它有最高的轉換率（如每個活動的垂直比例尺所指示）。
演算法還會挑選體驗 C 來前進，因為相較於剩餘的體驗，它的 Bernstein 95% 信賴區間上界最高。

體驗 D 和 C 會前進。

{width="200" modal="regular"}

第 4 回合: 在此回合中，80% 的流量分配給體驗 C 和 D (各 40%)。20% 的流量會隨機分配，因此，這表示 A、B、C 和 D 每個都會獲得 5% 的流量。在此回合中，體驗 C 表現良好。

演演算法會挑選體驗C來進行下一個循環，因為它有最高的轉換率（如每個活動的垂直刻度所示）。
演算法還會挑選體驗 D 來前進，因為相較於剩餘的體驗，它的 Bernstein 95% 信賴區間上界最高。

體驗 C 和 D 會前進。

{width="200" modal="regular"}

回合 n：隨著活動進行，表現優異的體驗會開始浮現，過程會持續到出現勝出體驗為止。當轉換率最高的體驗和任何其他體驗的信賴區間不重疊時，即會標示為獲勝者。徽章會顯示在成功活動的頁面和Activity清單中。

演算法會挑選體驗 C 成為確定贏家。

此時，演算法會將 80% 的流量供應給體驗 C，而 20% 的流量持續地隨機供應給所有體驗 (A、B、C、D)。C 總共獲得 85% 的流量。在很罕見的情況下，萬一獲勝者的信賴區間又開始重疊，演算法會回復到上面回合 4 的行為。

重要：如果您在過程中太早手動選擇獲勝者，很容易會選出錯誤的體驗。因此，最好等待演算法決定勝出體驗。

NOTE

如果活動只有兩個體驗，則兩個體驗會獲得相等的流量，直到Target找到具有75%信賴度的成功體驗為止。到那時，三分之二的流量會分配給成功者，三分之一分配給失敗者。之後，當體驗達到95%信賴度時，90%的流量會分配給獲勝者，而10%會分配給失敗者。 Target一律會傳送一些流量給「遺失」體驗，以避免最後的誤判（也就是說，維持一些探索）。

在啟動Auto-Allocate活動後，不允許從Target UI執行下列操作：

將「流量配置」模式切換為「手動」
變更目標量度類型
變更「Advanced Settings」面板中的選項

瞭解自動分配如何運作

如需詳細資訊，請參閱自動分配比手動測試提供更快的測試結果和更高的收入。

注意事項 section_5C83F89F85C14FD181930AA420435E1D

使用Auto-Allocate時請考量下列資訊：

Auto-Allocate功能只適用於一個進階量度設定： Increment Count and Keep User in Activity

不支援下列進階量度設定： Increment Count、Release User、Allow Reentry and Increment Count和Release User and Bar from Reentry。

經常再度訪問的訪客會抬高體驗轉換率。

如果一位見到體驗 A 的訪客經常再度訪問且多次轉換，則體驗 A 的轉換率 (CR) 會不自然地提高。將此結果與體驗B進行比較，後者訪客轉換但不常回訪。因此，體驗A的CR看起來比體驗B的CR更好，因此新訪客更有可能分配至A而不是B。如果您選擇對每個加入者計算一次，A的CR和B的CR可能會相同。

如果再度訪問的訪客隨機分佈，則對轉換率的影響很可能互相抵銷。為了減輕這種效應，請考慮將目標量度的計數方法變更為每一個加入者只算一次。

區分高效能者，而非低效者。

Auto-Allocate擅長區分表現優異的體驗（以及尋找獲勝者）。有時，表現不佳的體驗之間沒有足夠的差異性。

如果您想要在所有體驗之間產生統計上顯著的差異，可以考慮使用手動流量分配模式。

時間相關（或隨情境變化）的轉換率可能會扭曲分配量。

在標準A/B測試中因會影響所有體驗而可忽略的某些因素，在Auto-Allocate活動中無法忽略。演演算法易受觀察轉換率的影響。

可能以不同程度影響體驗效能的因素範例如下:

具有不同內容（時間、位置、性別等）相關性的體驗。

例如：
- 「感謝上帝，現在是星期五」導致星期五的轉換率較高。
- 「週一快速啟動」週一的轉換率較高。
- 「Gear up for an East-coast winter」在東海岸或受冬季影響的位置提供較高的轉換率。
使用具有不同內容相關性的體驗時，Auto-Allocate測試的結果會比使用A/B測試時扭曲得多，因為A/B測試會花較長的時間分析結果。
體驗的延遲轉換時間不同，可能是由於消息的迫切性。

例如，「七折促銷只到今天」暗示訪客今天應該成交，但「首購五折」就不會讓人感到相同的急迫性。

常見問題集 section_0E72C1D72DE74F589F965D4B1763E5C3

在使用Auto-Allocate活動時查詢下列的常見問答集：

Analytics for Target (A4T)是否支援Auto-Allocate活動？

是.如需詳細資訊，請參閱自動分配和自動鎖定目標活動的A4T支援。

再度訪問的訪客會自動重新分配到表現優異的體驗嗎？

無.只會自動重新分配新的訪客。再度訪問的訪客會繼續看見其原始體驗，以保護A/B測試的有效性。

演演算法如何處理誤判？

如果您等待到獲勝者徽章出現，演算法可保證 95% 可信度或 5% 誤判率。

Auto-Allocate何時開始配置流量？

當活動中的所有體驗皆至少有 1,000 位訪客和 50 次轉換之後，演算法就開始運作。

演演算法的利用積極性如何？

使用Auto-Allocate提供80%的流量，隨機提供20%的流量。識別出獲勝者時，80%的流量會流向該獲勝者，而所有體驗仍會隨著20%的流量繼續獲得一些流量，包括獲勝者體驗。

到底會不會顯示失敗體驗？

是.多臂吃角子老虎機會確保至少保留 20% 的流量，以供探索所有體驗不斷變化的模式或轉換率。

轉換延遲很久的活動會如何？

只要所有要最佳化的體驗皆面臨類似的延遲，行為就同於轉換週期較快的活動。不過，在流量分配程式開始之前，需要更長的時間才能達到50次轉換臨界值。

Auto-Allocate與Automated Personalization有何不同？

Automated Personalization會使用每位訪客的設定檔屬性來決定最佳體驗。這樣做不僅會最佳化，還會將該使用者的活動個人化。

另一方面，Auto-Allocate是A/B測試，可產生彙總獲勝者（最熱門的體驗，但不一定是每位訪客最有效的體驗）。

再度訪問的訪客會在我的成功量度上增加轉換率嗎？

目前，邏輯偏好快速轉換或瀏覽較頻繁的訪客，因為這類訪客會暫時誇大其所屬體驗的整體轉換率。演算法會經常自行調整，因此，轉換率提高每次皆會放大。如果網站獲得大量回訪訪客，其轉換可能會導致其所屬體驗的整體轉換率膨脹。再度訪問的訪客極可能是隨機分布，在此情況下，集體效應 (提升度增加) 會互相抵銷。為了減輕這種效應，請考慮將成功量度的計數方法變更為每一個加入者只算一次。

使用Auto-Allocate時，我可以利用樣本大小電腦來預估活動識別獲勝者所需的時間嗎？

您可以使用現有的Adobe Target 樣本大小電腦來取得測試執行時間的預估值。（和傳統A/B測試一樣，如果您測試兩個以上的選件或多個轉換量度/假設，請套用Bonferroni校正。）此計算器專為傳統的固定地平線A/B測試所設計，僅提供預估值。使用Auto-Allocate活動的計算器是選用的，因為Auto-Allocate會為您宣告獲勝者。您不需要挑選固定的時間點來檢視測試結果。提供的值在統計上一律有效。

內部Adobe實驗發現下列專案：

當僅測試兩個體驗時，如果體驗之間的效能差異很大，Auto-Allocate會比固定水平線測試（即樣本大小電腦建議的時間範圍）更快地找到獲勝者。不過，當體驗之間的效能差異很小時，Auto-Allocate可能需要額外的時間來識別獲勝者。在這些情況下，固定總時程測試通常會在沒有統計上顯著結果的情況下結束。
測試兩個以上的體驗時，當單一體驗的表現遠遠勝過所有其他體驗時，Auto-Allocate會比固定總時程測試（也就是樣本大小電腦建議的時間範圍）更快地找到獲勝者。當兩個或多個體驗都和其他體驗「獲勝」，但彼此非常相符時，Auto-Allocate可能需要額外的時間才能判斷哪個體驗更優秀。在這些情況下，固定範圍測試通常會以總結「成功」體驗優於表現較差的體驗結束，但未識別出哪個體驗更佳。

是否應從Auto-Allocate活動中移除表現缺佳的體驗，以加速決定獲勝者的程式？

沒有必要移除表現缺佳的體驗。 Auto-Allocate會自動增加提供表現優異的體驗的頻率，並減少提供表現不佳的體驗的頻率。在活動中保留表現缺佳的體驗不會大幅影響決定獲勝者的速度。

20% 的訪客是隨機分配到所有體驗。系統會將提供給表現缺佳的體驗的流量減至最少（20%除以體驗數量）。

我可以透過Auto-Allocate活動半途變更目標量度嗎？ change-metric

Adobe不建議您在活動中途變更目標量度。雖然在活動期間有可能使用 Target UI 變更目標量度，您應該總是開始一個新的活動。Adobe無法保證您在活動執行後變更目標量度會發生什麼情況。

此建議適用於使用Target或Analytics (A4T)作為報告來源的Auto-Allocate、Auto-Target和Automated Personalization活動。

我可以在Auto-Allocate活動中途變更報表來源嗎？ change-reporting

Adobe不建議您在活動中途變更報表來源。雖然在使用Target UI的活動中可以變更報表來源（從Target變更為A4T，或以相反的方式），您應該一律開始新的活動。 Adobe無法保證您會在活動執行後變更活動中的報告來源時發生什麼情況。

此建議適用於使用Target或Analytics (A4T)作為報告來源的Auto-Allocate、Auto-Target和Automated Personalization活動。

我在執行Auto-Allocate活動時可以使用Reset Report Data選項嗎？

不建議對Auto-Allocate活動使用Reset Report Data選項。雖然此選項會移除可見的報告資料，但不會移除Auto-Allocate模型中的所有訓練記錄。不要對Auto-Allocate個活動使用Reset Report Data選項，請建立新活動並停用原始活動。（此指引也適用於Auto-Target和Automated Personalization活動。）