자동 할당 활동에 대한 신뢰도를 수동으로 계산하는 방법

설명 description

환경

문제/증상
자동 할당 활동의 신뢰도는 Target UI에서 다르고 신뢰도 계산기 Excel을 통해 계산할 때 다릅니다. 이유는 무엇입니까?

해결 방법 resolution

자동 할당은 일반 A/B 테스트(사용한 계산기가 적용되는 곳, t 테스트, 즉 t 분포에서 파생된 p 값을 사용하는 곳)와 비교할 때 다른 신뢰도 계산기(Bernstein 경계 기반)를 사용합니다.
자동 할당에 사용되는 신뢰도 계산은 일반 t-테스트에서 사용되는 신뢰도 계산보다 훨씬 더 보수적입니다. 이것은 긍정 오류(false positive)를 제어하기 위한 것입니다. 즉, 우리가 보고 있는 효과가 무작위성으로 인한 것일 때, 한 팔이 다른 팔보다 낫다는 결정을 너무 일찍 내리는 것을 방지하기 위한 것입니다.

그래서 고전 t-테스트 기반 신뢰도가 93%가 될 것이지만, 자동 할당 신뢰도는 훨씬 낮다. 이 내용은 여기 우리 문서에도 공유되었습니다 [https://experienceleague.adobe.com/docs/target/using/activities/auto-allocate/automated-traffic-allocation.html?lang=en#section_98388996F0584E15BF3A99C57EEB7629](https://experienceleague.adobe.com/docs/target/using/activities/auto-allocate/automated-traffic-allocation.html?lang=ko#section_98388996F0584E15BF3A99C57EEB7629"다음 링크를 클릭합니다: https://experienceleague.adobe.com/docs/target/using/activities/auto-allocate/automated-traffic-allocation.html?lang=en#section_98388996F0584E15BF3A99C57EEB7629")

또한 여기에 언급된 대로 자동 할당 활동에는 60% 신뢰 수준이 필요합니다 [https://experienceleague.adobe.com/docs/target/using/activities/auto-allocate/determine-winner.html?lang=en#section_C8E068512A93458D8C006760B1C0B6A2](https://experienceleague.adobe.com/docs/target/using/activities/auto-allocate/determine-winner.html?lang=ko#section_C8E068512A93458D8C006760B1C0B6A2"다음 링크를 클릭합니다: https://experienceleague.adobe.com/docs/target/using/activities/auto-allocate/determine-winner.html?lang=en#section_C8E068512A93458D8C006760B1C0B6A2")