在此頁面上:瞭解如何使用「最佳化」活動設定路徑實驗,以使用A/B或多臂吃角子老虎機實驗來測試不同的歷程路徑、依成功量度識別績效最佳的處理,以及評估獲勝者。
實驗可讓您根據隨機分割來測試不同路徑,以根據預先定義的成功量度來判斷哪些路徑的執行效果最佳。
若要設定歷程中的路徑實驗,請遵循下列步驟。
假設您想比較三個路徑:
- 一個路徑,一個電子郵件;
- Wait節點為兩天的第二個路徑,以及一封電子郵件;
- 第三個路徑,其中包含電子郵件,然後是SMS訊息。
-
從 協調流程 區段,將 最佳化 活動拖放至歷程畫布。
-
新增選用標籤,這對於在報告和測試模式記錄中識別活動很有用。
-
從 方法 下拉式清單中選取實驗。
{width="65%"}
-
按一下建立實驗。
-
選取您想要為實驗設定的成功量度。 在本節中進一步瞭解可用的度量以及如何設定清單。
{width="80%"}的主要和額外量度選擇
-
為您的路徑實驗選取實驗型別:
-
A/B實驗 — 在測試開始時定義處理間的流量分割。 績效是根據您選擇的主要量度進行評估;報告會顯示觀察到的處理之間的提升度。
-
多臂吃角子老虎機 — 處理之間的流量分割會自動處理。 每7天會審視主要量度的效能,並據此調整權重。 報告會繼續顯示提升度,如同A/B測試。
{width="80%"}
-
-
您可以選擇將 保留 群組新增至您的傳遞。 此群組將不會從此實驗輸入任何路徑。
note NOTE 切換列會自動取用母體的10%。 您可以視需要調整此百分比。 -
您可以為每個 處理 分配精確百分比,或直接開啟 平均分配 切換列。
{width="80%"}
-
啟用自動縮放實驗以自動轉出實驗的成功變數。 進一步瞭解如何縮放成功者
-
按一下建立。
-
為從「實驗」產生的每個分支定義您想要的元素,例如:
{width="100%"}
-
可選擇在逾時或錯誤的情況下使用 新增替代路徑 來定義遞補動作。 了解更多
-
發佈您的歷程。
歷程上線後,會隨機指派使用者沿著不同路徑前進。 Journey Optimizer追蹤哪個路徑執行效果最佳並提供可操作的深入分析。
使用歷程路徑實驗報告追蹤您的歷程是否成功。 了解更多
歷程重新進入時的路徑指派 path-assignment
設定檔的路徑指派會持續存在於相同歷程版本的多個入口。 例如,如果設定檔在第1天進入歷程,並被指派給路徑A,然後在第2天再次進入歷程,則會再次被指派給路徑A。這可確保使用者獲得一致的體驗,且在統計上有效的報表和分析中也是必需的。
不過,這些指派只會持續存在於特定歷程版本中。 一旦您發佈新的歷程版本,隨機化就會變更,而設定檔最終可能會指派給不同路徑。
如果您的歷程中有多個路徑實驗活動,則每個活動會套用獨立的隨機指派。
實驗使用案例 uc-experiment
下列範例說明如何將 最佳化 活動與 實驗 方法搭配使用,以決定哪一個路徑整體運作最好。
測試透過電子郵件傳送第一條訊息還是透過簡訊傳送第一條訊息是否會提高轉換率。
➡️使用轉換率作為成功量度(例如:購買、註冊)。
執行實驗,檢查在一週內傳送一封電子郵件還是傳送三封電子郵件是否會造成更多購買。
➡️使用購買或取消訂閱率作為成功量度。
比較24小時等待和後續追蹤前72小時的等待,以確定哪一個時間可最大化參與。
➡️使用點進率或收入作為成功量度。
縮放成功者 scale-winner
Scale the Winner 讓您能透過自動或手動方式,將實驗的獲勝變化版本推廣給所有受眾。 此功能可確保一旦確定獲勝者後,您就可以擴大其觸及範圍和有效性,而無需持續監控實驗。
您可以在兩種模式之間進行選擇:
-
自動縮放:選擇縮放成功處理的時間與條件,或在沒有贏家出現時選擇遞補選項,在建立實驗時設定自動縮放設定。
-
手動縮放:手動檢閱實驗結果,並啟動成功處理的轉出,以完整控制時間與決定。
自動縮放 autoscaling
自動縮放可讓您根據實驗結果,設定何時推出成功處理或遞補專案的預先定義規則。
請注意,自動縮放一經發生,便無法再使用手動縮放。
若要在實驗中啟用自動縮放:
-
視需要設定您的歷程並設定您的實驗。 了解更多
-
設定實驗時啟用自動縮放選項。
-
選取縮放成功者的時間:
- 找到獲勝者之後。
- 實驗在所選的時間內上線後。
自動縮放時間必須排程在實驗的結束日期之前。 如果設定的時間晚於結束日期,則會出現驗證警告,且不會發佈歷程。
中自動縮放時間選擇
-
如果依時間比例找不到任何獲勝者,請選擇遞補行為:
- 繼續實驗,直到其依排程結束。
- 在指定時間後縮放替代處理。
在符合所有引數後,您的成功或替代處理方式就會傳送給您的對象。
手動縮放 manual-scaling
手動縮放讓您能夠檢閱實驗結果,並決定何時根據自己的排程推出成功處理。
請注意,如果您在排程的自動縮放時間之前手動縮放成功者,則會取消自動縮放。
若要手動縮放實驗的獲勝者:
-
視需要設定您的歷程並設定您的實驗。 了解更多
-
讓實驗執行,直到識別出獲勝者或達到統計顯著性為止。
-
開啟您的歷程並選取包含路徑實驗的 最佳化 活動。
檢閱 路徑實驗 檢視中的結果,以識別表現最佳的處理。
-
按一下縮放處理,將成功處理推送給其他對象。
-
從下拉式選單中選取您要縮放的處理方式,然後按一下縮放。
{width="80%"}中縮放處理選擇
請注意,縮放處理可能需要長達一小時的時間。 手動縮放程式完成後,您將會收到通知。
本節包含結構化知識,用於支援與本主題相關的解譯、擷取和問答。
如需完整瞭解,此資訊應結合本頁的檔案。 兩者皆非獨立來源;頁面說明功能,本節提供額外內容,以協助去除術語、意圖、適用性和限制條件的歧義。
- TL;DR:此頁面說明如何使用A/B或Multi-armed Bandit方法在Adobe Journey Optimizer歷程中設定並執行路徑實驗,以及如何自動或手動縮放成功處理。
意圖:
- 在歷程中設定A/B或多臂吃角子老虎機路徑實驗
- 定義成功量度以評估實驗效能
- 在處理路徑之間平均或按自訂百分比分配流量
- 新增保留群組以從所有處理中排除部分對象
- 啟用自動縮放以自動推出成功處理
- 在檢閱實驗結果後手動縮放成功處理
字彙表:
- 最佳化活動:歷程畫布活動,用於將設定檔分割成不同的路徑,以進行實驗或鎖定目標(產品特定)
- 處理:路徑實驗中的單一路徑變體(例如,處理A、處理B) (產品特定)
- 成功量度:用於評估實驗 (產品專屬) 中哪個處理執行效果最佳的KPI
- 多臂吃角子老虎機:一種實驗型別,其流量分割會根據主要量度效能 (產品特定) 每7天自動調整一次
- 縮放成功者:可自動或手動將成功處理轉出給剩餘完整對象的功能(產品特定)
- 保留群組:從所有實驗處理中排除的對象區段,用作控制群組(產品特定)
護欄:
- 縮放成功者僅適用於單一歷程(事件觸發和對象資格),不適用於讀取對象歷程。
- 自動縮放時間必須排程在實驗的結束日期之前,否則歷程不會發佈。
- 自動縮放一經發生,便無法再使用手動縮放。
- 在排程的自動縮放時間取消自動縮放之前手動縮放成功者。
- 縮放處理可能需要長達一小時的時間。
術語:
- 正式名稱:路徑實驗 — 首字母縮寫:none — 變體:歷程實驗、A/B路徑測試
- 同義字:「最佳化活動」=「實驗活動」=「路徑分割活動」
- 請勿混淆:「A/B實驗」≠「多臂吃角子老虎機」(A/B具有固定的流量分割;多臂吃角子老虎機每7天會動態調整權重)
常見問題集:
- 問:A/B實驗與多臂吃角子老虎機之間有何差異? — A/B實驗使用開始時定義的固定流量分割,而Multi-armed Bandit會根據主要量度效能每7天自動調整流量權重。
- 問:我可以在讀取對象歷程中使用縮放成功者嗎? — 否;縮放成功者僅適用於單一(事件觸發和對象資格)歷程。
- 問:如果自動縮放時間找不到任何獲勝者,會發生什麼情況? — 您可以設定遞補:繼續實驗直到其排程結束,或在指定時間後縮放替代處理。
- 問:如果未手動設定處理百分比,流量如何分配? — 您可以啟用「平均分配」切換功能,將流量平均分割到所有處理。
- 問:歷程發佈後是否可以編輯路徑實驗? — 歷程在發佈後進入唯讀模式;若要進行變更,請建立歷程的新版本。