Teste AB para deliveries de email e significância estatística

Descrição description

Ambiente

  • Campaign Classic
  • Campaign
  • Campaign Standard

Problemas/Sintomas

Recommendations para teste AB para deliveries de email e significância estatística.

Resolução resolution

Para ser estatisticamente significativo, um teste A/B deve confiar em segmentos A, B e restantes suficientemente grandes. Geralmente, considera-se que os segmentos A e B compõem 1500 recipients cada (então 3000 como um todo). A recomendação seria que:

  • Se o objetivo inicial for inferior a 30.000 destinatários, o teste A/B será mais ou menos irrelevante.
  • Se sua meta estiver em algum ponto entre 30.000 e 50.000 recipients, você deverá disparar para os segmentos A e B, contabilizando cada um deles para um mínimo de 10% da meta inicial.
  • Se a meta estiver acima de 50.000, você poderá disparar com segurança para os segmentos A e B, contabilizando cada um deles pelo menos 5% da meta inicial.
recommendation-more-help
3d58f420-19b5-47a0-a122-5c9dab55ec7f