Média de aumento, Limites de aumento e Intervalo de confiança

Os relatórios incluem vários pontos de dados e representações de visualização que ajudam a entender os limites de aumento e o nível de confiança associados à sua Adobe Target para ajudar você a determinar com mais precisão um vencedor.

Interpretar os dados

A ilustração a seguir mostra Limites de aumento e Nível de confiança Informações:

As informações de incentivo e confiança na Target a interface do usuário de relatórios inclui:

Aumento

O número grande e a seta refletem o valor esperado do aumento. Esse número é o ponto médio do intervalo dos limites de aumento. A seta de aumento esperado é exibida em cinza até que a confiança passe 95%. Após esse limite, a seta é exibida em vermelho ou verde com base no aumento negativo ou positivo, respectivamente.

Limites de aumento

Este é o intervalo de confiança de 95% do aumento. Ele é exibido como um intervalo abaixo da média de aumento. Consulte Exemplo de cálculo abaixo para obter um exemplo de como esses limites de aumento são calculados.

Gráfico de caixa

O boxplot no Target representa o valor esperado e o intervalo de confiança de 95% da métrica de sucesso em questão. Pense nisso como uma maneira gráfica de exibir as informações de aumento e os limites de aumento.

Há algumas maneiras principais Target ajuda a interpretar as informações de confiança, uma das quais é a cor. O gráfico exibe qualquer sobreposição no intervalo de confiança de uma experiência específica com o intervalo de confiança do controle em cinza e qualquer faixa do intervalo de confiança de uma experiência específica acima ou abaixo do intervalo de confiança de controle como verde ou vermelho, respectivamente.

O comprimento da barra do boxplot representa o tamanho do intervalo de confiança de uma maneira fácil de entender. À medida que você coleta mais dados em sua atividade, a barra é alterada. O intervalo de confiança é derivado da variação e do tamanho da amostra (número de visitantes). Quanto menor a variação e quanto maior o tamanho da amostra, mais estreito o seu intervalo de confiança.

Confiança

A confiança de uma experiência ou oferta exibida é uma probabilidade (expressa como uma porcentagem) de obter um resultado menos extremo do que aquele que é realmente observado, se a hipótese nula for verdadeira, ou seja, se não houver diferença nas taxas de conversão entre essa experiência ou oferta e a experiência/oferta de controle. Em termos de valores p, essa confiança é exibida 1 - p-value. Em termos mais simples, a confiança mais alta indica que os dados são menos consistentes com a suposição de que a oferta/experiência de controle e não controle têm taxas de conversão iguais.

Entender como o intervalo de confiança para aumento é determinado

Baixe o Intervalo de confiança para arquivo pdf do Lift para obter mais informações.

Como são calculados os limites de aumento?

Os limites de aumento representam os intervalos de confiança de 95% do aumento que a experiência ou oferta específica tem sobre a experiência de controle ou oferta. Falando vagamente, isso significa que o aumento real tem cerca de 95% de chance de estar entre esses limites.

Os limites de aumento são calculados usando a seguinte fórmula:

Existe um cálculo adicional para chegar à entrada dos nossos limites de aumento:

• valor t: a estatística crítica para o nosso nível de confiança de 95% é de 1,96. Saiba mais sobre os valores t aqui.

• Variação do aumento: A métrica de sucesso do Erro Padrão de Experiência N e a métrica de sucesso Erro Padrão da Experiência de Controle são necessárias para determinar a variação de aumento, que é calculada usando a seguinte fórmula (ilustrada caso a métrica de sucesso seja conversão).

  

• Índice de conversão / Erro padrão da métrica de sucesso: O erro padrão é calculado da mesma forma para a Experiência N e o Controle, usando a seguinte fórmula (ilustrada caso a métrica de sucesso seja conversão). Saiba mais sobre erro padrão aqui.

  

  OBSERVAÇÃO

  O erro padrão para atividades de métricas de sucesso de receita é baseado na variação da amostra da receita.

Exemplo de cálculo

Vamos considerar um exemplo de atividade com duas experiências e os seguintes resultados:

Com base em nossas fórmulas, podemos calcular as entradas necessárias para os limites de aumento.

Erro padrão para Experiência A (Controle)

Erro padrão para Experiência B

Variação de aumento para Experiência B

Variação de aumento para Experiência B

Aumento esperado para Experiência B:

Portanto, os limites de aumento para a Experiência B podem ser:

Quando os limites de aumento não são exibidos?

Em certos casos, Target não exibe limites de aumento:

• Para qualquer atividade, quando o número total de visitas ou visitantes for menor que 30.
• Para Alocação automática , nenhum limite de aumento é exibido até que uma experiência tenha atingido 60% de confiança.