預估成功測試所需的流量

因為多變數測試會比較多個體驗,請務必瞭解若要提供有意義的結果需要多少流量。流量估算程式會使用關於您的頁面和待測試體驗數量的統計資料,以預估讓測試成功所需的流量和測試持續時間。

流量估算程式會預測需要的樣本大小,以確保下列:

  • 95% 可信度

    這表示報告誤判的機會,如果沒有實際的提升度則為 5% (100% - 可信度)。

  • 80% 統計檢定力

    此表示測試有 80% 的可能性可偵測到 25% 或更高的真實提升度。

  • 最低 25% 的可靠可偵測的提升度

    Target 會計算有 80% 的機會可偵測到 25% 或更高真實提升度所需的流量。

此測試使用 Bonferroni 校正來對多個比較進行更正。此方法已知較為保守,它是利用強制執行相對大的最小可靠可偵測提升度來平衡。

流量估算程式也會提供回饋意見,讓您得知是否有足夠的流量讓您設計的測試成功。

  1. 在體驗撰寫器中,按一下​「流量」​圖示。

    流量估算程式隨即開啟。您可以再按一下​「流量」​圖示來隱藏流量估算程式。

  2. 提供一般轉換率、預估每日訪客人數和測試持續時間。

    • 內容組合數量: 在執行任何排除之後,根據要隨活動建立的體驗數量自動計算。
    • 一般轉換率: 轉換率會根據您的估計或來自您分析系統的過去資料而以百分比表示
    • 預估每日訪客人數: 這是根據鎖定目標條件所得到的可能檢視此頁面的訪客數量。這可能根據您的分析資料。
    • 測試持續時間: 活動要執行的天數。

    流量估算程式會使用這些統計資料來判斷執行成功測試所需的調整。

    在接近流量估算程式頂端,您輸入的值會經過計算並顯示結果。

    當您變更數量時,預估即會變更。例如,如果您要測試大量體驗,並且您的轉換率和曝光次數太低,流量估算程式會顯示測試執行需要多久時間才會成功。或者,如果您的流量很低,流量估算程式可能會建議較低數量的體驗,讓您可以執行測試達需要的天數。

    如果您沒有足夠的流量,您可以執行以下一或兩個動作:

    • 減少選件組合的數量和位置的數量。
    • 增加測試的持續時間。

    調整數量直到流量估算程式指出您有足夠的流量為止,然後據以設計您的測試。

本頁內容