Calcul manuel du degré de confiance des activités d’affectation automatique

Description description

Environnement

Adobe Target

Problèmes/symptômes

Le degré de confiance de l’activité d’affectation automatique est différent dans l’interface utilisateur de Target et lorsqu’il est calculé par l’intermédiaire du calculateur de degré de confiance Excel. Pourquoi ?

Résolution resolution

L’affectation automatique utilise un calculateur de confiance différent (basé sur les limites de Bernstein) par rapport aux tests A/B standard (où s’applique la calculatrice que vous avez utilisée ; qui utilise un test en t, c’est-à-dire des valeurs-p dérivées de la distribution en t).

Les calculs de confiance utilisés par l’affectation automatique sont beaucoup plus conservateurs que ceux utilisés par les tests en t standard. C'est fait pour contrôler les faux positifs, c'est-à-dire pour nous empêcher de faire une détermination précoce qu'un bras est meilleur qu'un autre quand l'effet que nous voyons est dû au hasard.

C’est pourquoi la confiance classique basée sur les tests en t est de > 93 %, mais la confiance d’affectation automatique est beaucoup plus faible. Elle est également partagée dans les documents Présentation de l’affectation automatique.

Un degré de confiance de 60 % est requis pour l’affectation automatique des activités comme mentionné ici.