Média de aumento, Limites de aumento e Intervalo de confiança

Os relatórios incluem vários pontos de dados e representações de visualização que ajudam a entender os limites de aumento e o nível de confiança associados à sua atividade Adobe Target para ajudar você a determinar com mais precisão um vencedor.

Interpretar os dados

A ilustração a seguir mostra informações sobre Limites de incentivo e Nível de confiança:

As informações de lift e confiança na interface do usuário de relatórios Target incluem:

Aumento

O número grande e a seta refletem o valor esperado do aumento. Esse número é o ponto médio do intervalo dos limites de aumento. A seta de aumento esperado é exibida em cinza até que a confiança passe 95%. Após esse limite, a seta é exibida em vermelho ou verde com base no aumento negativo ou positivo, respectivamente.

Limites de aumento

Este é o intervalo de confiança de 95% do aumento. Ele é exibido como um intervalo abaixo da média de aumento. Consulte Exemplo de cálculo abaixo para obter um exemplo de como esses limites de aumento são calculados.

Gráfico de caixa

O boxplot na interface Target representa o valor esperado e o intervalo de confiança de 95% da métrica de sucesso em questão. Pense nisso como uma maneira gráfica de exibir as informações de aumento e os limites de aumento.

Há algumas maneiras principais de Target ajudar você a interpretar as informações de confiança, uma delas é a cor. O gráfico exibe qualquer sobreposição no intervalo de confiança de uma experiência específica com o intervalo de confiança do controle em cinza e qualquer faixa do intervalo de confiança de uma experiência específica acima ou abaixo do intervalo de confiança de controle como verde ou vermelho, respectivamente.

O comprimento da barra do boxplot representa o tamanho do intervalo de confiança de uma maneira fácil de entender. À medida que você coleta mais dados em sua atividade, a barra é alterada. O intervalo de confiança é derivado da variação e do tamanho da amostra (número de visitantes). Quanto menor a variação e quanto maior o tamanho da amostra, mais estreito o seu intervalo de confiança.

Confiança

A confiança de uma experiência ou oferta representa a probabilidade de que o aumento da experiência/oferta associada sobre a experiência/oferta de controle seja "real" (não causado aleatoriamente). Normalmente, 95% é o nível de confiança recomendado para o aumento ser considerado significativo.

Como são calculados os limites de aumento?

Os limites de aumento representam os intervalos de confiança de 95% do aumento que a experiência ou oferta específica tem sobre a experiência de controle ou oferta. Falando vagamente, isso significa que o aumento real tem cerca de 95% de chance de estar entre esses limites.

Os limites de aumento são calculados usando a seguinte fórmula:

Existe um cálculo adicional para chegar à entrada dos nossos limites de aumento:

• valor t: a estatística crítica para o nosso nível de confiança de 95% é de 1,96. Saiba mais sobre os valores t aqui.

• Variação do aumento: A métrica de sucesso do Erro Padrão de Experiência N e a métrica de sucesso Erro Padrão da Experiência de Controle são necessárias para determinar a variação de aumento, que é calculada usando a seguinte fórmula (ilustrada caso a métrica de sucesso seja conversão).

  

• Índice de conversão / Erro padrão da métrica de sucesso: O erro padrão é calculado da mesma forma para a Experiência N e o Controle, usando a seguinte fórmula (ilustrada caso a métrica de sucesso seja conversão). Saiba mais sobre erro padrão aqui.

  

  OBSERVAÇÃO

  O erro padrão para atividades de métricas de sucesso de receita é baseado na variação da amostra da receita.

Exemplo de cálculo

Vamos considerar um exemplo de atividade com duas experiências e os seguintes resultados:

Com base em nossas fórmulas, podemos calcular as entradas necessárias para os limites de aumento.

Erro padrão para Experiência A (Controle)

Erro padrão para Experiência B

Variação de aumento para Experiência B

Variação de aumento para Experiência B

Aumento esperado para Experiência B:

Portanto, os limites de aumento para a Experiência B podem ser:

Quando os limites de aumento não são exibidos?

Em certos casos, Target não exibe os limites de aumento:

• Para qualquer atividade, quando o número total de visitas ou visitantes for menor que 30.
• Para atividades de Alocação automática, nenhum limite de aumento é exibido até que uma experiência tenha atingido 60% de confiança.