성공적인 테스트에 필요한 트래픽 예측

다변량 테스트는 여러 개의 경험을 비교하기 때문에 의미있는 결과를 제공하는 데 필요한 트래픽의 양을 파악하는 것이 중요합니다. 트래픽 견적 도구는 테스트되는 경험의 수 및 페이지에 대한 통계를 사용하여 성공적인 테스트에 필요한 테스트 기간과 트래픽의 양을 예상합니다.

트래픽 견적 도구는 다음을 확인하는 데 필요한 샘플 크기를 예측합니다.

  • 95% 신뢰도:

    실제 상승도가 없는 경우 거짓 긍정을 보고할 가능성이 5%임을 의미합니다(100% - 신뢰 수준).

  • 80% 통계적 검정력:

    테스트에서 25% 이상의 실제 상승도를 감지할 확률이 80%임을 의미합니다.

  • 25% 최소 안정적인 감지 가능한 상승도:

    Target은 25% 이상의 실제 상승도를 감지할 가능성이 80%가 되는 데 필요한 트래픽 양을 계산합니다.

테스트는 Bonferroni 수정을 사용하여 다중 비교에 맞게 수정합니다. 이 방법은 비교적 큰 최소 안정적인 감지 가능한 상승도를 적용하여 균형을 맞추는 보수적 방식으로 알려져 있습니다.

또한 트래픽 견적 도구는 디자인한 테스트가 성공하기 위한 충분한 트래픽이 있는지를 알 수 있도록 하는 피드백도 제공합니다.

  1. 경험 작성기에서 트래픽 아이콘을 클릭합니다.

    트래픽 견적 도구가 열립니다. 트래픽 아이콘을 다시 클릭하여 트래픽 견적 도구를 숨길 수 있습니다.

    예상 이미지

  2. 일반적인 전환율, 일별 예상 방문자 수, 테스트 기간을 제공합니다.

    • 콘텐츠 조합 수: 제외 후 활동의 일부로 만들어지는 경험 수에 따라 자동으로 계산됩니다.
    • 일반 전환율: 전환율은 사용자의 예측 또는 분석 시스템의 과거 데이터를 기준으로 백분율로 표시됩니다.
    • 일별 예상 방문자 수: 타깃팅 기준에 따라 이 페이지를 볼 수 있는 방문자의 수입니다. 분석 데이터를 기준으로 생성될 수 있습니다.
    • 테스트 기간: 활동을 실행할 일수입니다.

    트래픽 견적 도구는 이러한 통계를 사용하여 성공적인 테스트를 실행하는 데 필요한 조정 사항을 결정합니다.

    트래픽 견적 도구 위쪽에서 입력된 값이 계산되고 결과가 표시됩니다.

    견적 정보불충분한 이미지

    숫자를 변경하면 예측값이 변경됩니다. 예를 들어, 많은 수의 경험을 테스트하며 전환율 및 노출 수가 너무 낮은 경우, 트래픽 견적 도구에 테스트를 성공적으로 실행해야 하는 기간이 표시됩니다. 또는 트래픽이 낮은 경우, 트래픽 견적 도구는 원하는 일수를 테스트할 수 있도록 더 낮은 수의 경험을 제안할 수 있습니다.

    충분한 트래픽이 없는 경우 다음 중 한 가지 또는 두 작업을 모두 수행할 수 있습니다.

    • 오퍼의 조합 수와 위치 수를 줄입니다.
    • 테스트의 지속 기간을 늘립니다.

    트래픽 견적 도구가 트래픽이 충분하다고 표시할 때까지 수치를 조정한 후 그에 따라 테스트를 디자인하십시오.

    견적 도구 이미지

이 페이지에서는