Os relatórios incluem vários pontos de dados e representações de visualização que ajudam a entender os limites de aumento e o nível de confiança associados à sua Adobe Target para ajudar você a determinar com mais precisão um vencedor.
Esse recurso está disponível somente ao visualizar relatórios em Tabela Exibir. Este recurso não está disponível para atividades que usam o Analytics como fonte de relatórios (A4T).
A ilustração a seguir mostra Limites de aumento e Nível de confiança Informações:
As informações de incentivo e confiança na Target a interface do usuário de relatórios inclui:
O número grande e a seta refletem o valor esperado do aumento. Esse número é o ponto médio do intervalo dos limites de aumento. A seta de aumento esperado é exibida em cinza até que a confiança passe 95%. Após esse limite, a seta é exibida em vermelho ou verde com base no aumento negativo ou positivo, respectivamente.
Este é o intervalo de confiança de 95% do aumento. Ele é exibido como um intervalo abaixo da média de aumento. Consulte Exemplo de cálculo abaixo para obter um exemplo de como esses limites de aumento são calculados.
O boxplot no Target representa o valor esperado e o intervalo de confiança de 95% da métrica de sucesso em questão. Pense nisso como uma maneira gráfica de exibir as informações de aumento e os limites de aumento.
Há algumas maneiras principais Target ajuda a interpretar as informações de confiança, uma das quais é a cor. O gráfico exibe qualquer sobreposição no intervalo de confiança de uma experiência específica com o intervalo de confiança do controle em cinza e qualquer faixa do intervalo de confiança de uma experiência específica acima ou abaixo do intervalo de confiança de controle como verde ou vermelho, respectivamente.
O comprimento da barra do boxplot representa o tamanho do intervalo de confiança de uma maneira fácil de entender. À medida que você coleta mais dados em sua atividade, a barra é alterada. O intervalo de confiança é derivado da variação e do tamanho da amostra (número de visitantes). Quanto menor a variação e quanto maior o tamanho da amostra, mais estreito o seu intervalo de confiança.
A confiança de uma experiência ou oferta exibida é uma probabilidade (expressa como uma porcentagem) de obter um resultado menos extremo do que aquele que é realmente observado, se a hipótese nula for verdadeira, ou seja, se não houver diferença nas taxas de conversão entre essa experiência ou oferta e a experiência/oferta de controle. Em termos de valores p, essa confiança é exibida 1 - p-value
. Em termos mais simples, a confiança mais alta indica que os dados são menos consistentes com a suposição de que a oferta/experiência de controle e não controle têm taxas de conversão iguais.
Baixe o Intervalo de confiança para arquivo pdf do Lift para obter mais informações.
Os limites de aumento representam os intervalos de confiança de 95% do aumento que a experiência ou oferta específica tem sobre a experiência de controle ou oferta. Falando vagamente, isso significa que o aumento real tem cerca de 95% de chance de estar entre esses limites.
Os limites de aumento são calculados usando a seguinte fórmula:
Existe um cálculo adicional para chegar à entrada dos nossos limites de aumento:
valor t: a estatística crítica para o nosso nível de confiança de 95% é de 1,96. Saiba mais sobre os valores t aqui.
Variação do aumento: A métrica de sucesso do Erro Padrão de Experiência N e a métrica de sucesso Erro Padrão da Experiência de Controle são necessárias para determinar a variação de aumento, que é calculada usando a seguinte fórmula (ilustrada caso a métrica de sucesso seja conversão).
Índice de conversão / Erro padrão da métrica de sucesso: O erro padrão é calculado da mesma forma para a Experiência N e o Controle, usando a seguinte fórmula (ilustrada caso a métrica de sucesso seja conversão). Saiba mais sobre erro padrão aqui.
O erro padrão para atividades de métricas de sucesso de receita é baseado na variação da amostra da receita.
Vamos considerar um exemplo de atividade com duas experiências e os seguintes resultados:
Experiência | Visitantes | Conversões | Índice de conversão |
---|---|---|---|
Experiência A (Controle) | 219, 328 | 2,466 | 1.12% |
Experiência B | 218, 362 | 3,040 | 1.39% |
Com base em nossas fórmulas, podemos calcular as entradas necessárias para os limites de aumento.
Erro padrão para Experiência A (Controle)
Erro padrão para Experiência B
Variação de aumento para Experiência B
Variação de aumento para Experiência B
Aumento esperado para Experiência B:
Portanto, os limites de aumento para a Experiência B podem ser:
Espere pequena variações entre os cálculos manuais usando as fórmulas acima e os números exibidos no relatório. A diferença pode ser atribuída ao fato de que os números de exibições de página usados nos cálculos manuais são arredondados. O aumento mostrado no Target O relatório é baseado nos números exatos obtidos do engajamento total e da contagem de engajamento. Os números de engajamento podem ser obtidos por meio da API de relatórios de desempenho.
Em certos casos, Target não exibe limites de aumento: