AB Testing para deliveries de email e significância estatística

Descrição

Ambiente

  • Campaign Classic
  • Campaign
  • Campaign Standard

Problemas/sintomas
Documentação sobre AB Testing para deliveries de email esignificância estatística

Resolução

Para ser estatisticamente significativo, um teste A/B deve depender de segmentos A, B e restantes grandes o suficiente. Geralmente, é considerado que os segmentos A e B compõem 1500 recipients cada (portanto, 3000 como um todo). A recomendação é que:

  • Se o alvo inicial for inferior a 30.000 recipients, o teste A/B será mais ou menos irrelevante.
  • Se o seu público-alvo estiver entre 30.000 e 50.000 recipients, você deverá atirar nos segmentos A e B, respondendo cada um por um mínimo de 10% do seu público-alvo inicial.
  • Se sua meta for superior a 50.000, você poderá disparar com segurança para segmentos A e B, contabilizando cada um por pelo menos 5% de sua meta inicial.

Nesta página