Dimensione del test A/B mirato troppo piccola

Questo articolo illustra il problema di Campaign Standard, in cui la dimensione di Target viene contrassegnata come un avviso per essere troppo piccola in un test A/B. Questo può essere attribuito alla percentuale della popolazione che apprende rispetto alla popolazione totale.

Descrizione description

Ambiente

Campaign Standard

Problema/Sintomi

Invii un test A/B basato su Oggetto e scopri che la dimensione di Target è contrassegnata come un avviso per essere troppo piccola (nella documentazione non sono menzionate le dimensioni minime di Target). La variante vincente è stata selezionata manualmente quando le consegne di follow-up non selezionavano un vincitore.

Estrazione della popolazione di prova: 1622 messaggi per ciascuna delle 2 varianti (32451 totale della popolazione)
La dimensione del segmento di test è troppo piccola per il test A/B: "1622" per un valore minimo consigliato di "3245"

Risoluzione resolution

Ciò dipende dal significato del test A/B da eseguire. Se la popolazione totale è inferiore a 50.000 persone, la popolazione che apprende deve essere almeno il 10% della popolazione totale.

recommendation-more-help
3d58f420-19b5-47a0-a122-5c9dab55ec7f