Estimar o tráfego necessário para uma atividade de Teste multivariado bem-sucedida
Como o teste multivariado compara várias experiências, é importante saber qual é a quantidade de tráfego necessária para oferecer resultados significativos. O Avaliador de tráfego usa estatísticas sobre sua página e o número de experiências que estão sendo testadas para estimar a quantidade de tráfego e a duração do teste necessárias para tornar o teste bem-sucedido.
O Avaliador de Tráfego prevê o tamanho de amostra necessário para garantir o seguinte:
- 95% de confiança. Essa estatística significa que a chance de relatar um falso positivo se não houver aumento real é de 5% (100% - nível de confiança).
- 80% de potência estatística. Essa estatística significa que o teste tem uma probabilidade de 80% de detectar um aumento real de 25% ou mais.
- 25% de aumento mínimo detectável com confiança. Target calcula a quantidade de tráfego necessária para ter 80% de chance de detectar um aumento real de 25% ou mais.
O teste usa a correção de Bonferroni para corrigir para várias comparações. Esse método é conhecido por ser conservador, pois é balanceado pela aplicação de uma elevação mínima detectável confiável grande.
O Avaliador de tráfego também fornece feedback que permite saber se você tem tráfego suficiente para o teste que você projetou para ter sucesso.
-
Na página Experiências do Visual Experience Composer em uma atividade Multivariada, clique no ícone Tráfego (
O Avaliador de Tráfego se abre.
Você pode clicar no ícone novamente para ocultar o Avaliador de tráfego.
Próximo à parte superior do Avaliador de tráfego, os valores inseridos são calculados e os resultados são mostrados.
-
(Condicional) Forneça a taxa de conversão típica, os visitantes estimados por dia e a duração do teste.
- Número de combinações de conteúdo: calculado automaticamente com base no número de experiências que estão sendo criadas como parte da atividade após as exclusões.
- Taxa de conversão típica: a taxa de conversão é expressa como uma porcentagem, com base na estimativa ou dados anteriores do sistema de análise.
- Visitantes estimados por dia: essa é a quantidade de visitantes que provavelmente visualizarão essa página com base nos critérios de direcionamento. Isso pode se basear nos dados da análise.
- Duração do teste: a quantidade de dias de duração da execução da atividade.
O Avaliador de Tráfego usa essas estatísticas para determinar quais ajustes são necessários para executar um teste bem-sucedido.
A estimativa muda, à medida que você muda os números. Por exemplo, se você estiver testando muitas experiências e sua taxa de conversão e impressões estiverem muito baixas, o Avaliador de tráfego mostra por quanto tempo o teste deve ser executado para ser bem-sucedido. Ou, se o tráfego for baixo, o Avaliador de tráfego pode sugerir um número menor de experiências para que você possa executar o teste pelo número desejado de dias.
Caso não tenha tráfego suficiente, você pode fazer uma ou ambas as opções a seguir:
- Reduza o número de combinações de ofertas e o número de locais.
- Aumente a duração do teste.
Ajuste os números até que o Avaliador de tráfego indique que você tem tráfego suficiente e, em seguida, crie seu teste adequadamente.