Como calcular a confiança das atividades de alocação automática manualmente?

Descrição

Ambiente

  • Target


 
Problemas/sintomas
A confiança da atividade de alocação automática é diferente na interface do usuário do Target e quando calculada por meio do excel da calculadora de confiança. Por que isso ocorre?

Resolução

A Alocação automática usa uma calculadora de confiança diferente (baseada em limites de Bernstein) quando comparada com testes A/B regulares (que é onde a calculadora que você usou será aplicada; que utiliza um teste t (ou seja, valores p derivados da distribuição t).
Os cálculos de confiança usados pela alocação automática são muito mais conservadores do que os usados pelos testes t regulares. Isso é controlar falsos positivos, ou seja, impedir que façamos cedo demais a determinação de que um braço é melhor que outro, quando na realidade o efeito que estamos vendo é devido à aleatoriedade.

É por isso que um teste t clássico baseado em confiança será de 93%, mas a confiança de alocação automática é muito menor. Isto também foi compartilhado nos nossos documentos aqui [https://experienceleague.adobe.com/docs/target/using/activities/auto-allocate/automated-traffic-allocation.html?lang=pt-BR#section_98388996F0584E15BF3A99C57EEB7629](/docs/target/using/activities/auto-allocate/automated-traffic-allocation.html?lang=pt-BR#section_98388996F0584E15BF3A99C57EEB7629"Clique para seguir o link: https://experienceleague.adobe.com/docs/target/using/activities/auto-allocate/automated-traffic-allocation.html?lang=pt-BR#section_98388996F0584E15BF3A99C57EEB7629")

Além disso, é necessário um nível de confiança de 60% para as atividades de alocação automática, como mencionado aqui [https://experienceleague.adobe.com/docs/target/using/activities/auto-allocate/determine-winner.html?lang=pt-BR#section_C8E068512A93458D8C006760B1C0B6A2](/docs/target/using/activities/auto-allocate/determine-winner.html?lang=pt-BR#section_C8E068512A93458D8C006760B1C0B6A2"Clique para seguir o link: https://experienceleague.adobe.com/docs/target/using/activities/auto-allocate/determine-winner.html?lang=pt-BR#section_C8E068512A93458D8C006760B1C0B6A2")

Nesta página