경로 실험 사용 experimentation

오케스트레이션 섹션에서 최적화 활동을 여정 캔버스로 끌어서 놓습니다.

보고 및 테스트 모드 로그에서 활동을 식별하는 데 유용할 수 있는 선택적 레이블을 추가합니다.

메서드 드롭다운 목록에서 실험​을(를) 선택합니다.

{width="65%"}

실험 만들기​를 클릭합니다.

실험에 대해 설정할 성공 지표​를 선택하십시오. 사용 가능한 지표와 이 섹션에서 목록을 구성하는 방법에 대해 자세히 알아보세요.

{width="80%"}

경로 실험에 대한 실험 유형​을(를) 선택하십시오.

• A/B 실험 — 테스트 시작 시 처리 간 트래픽 분할을 정의합니다. 성능은 선택한 기본 지표를 기반으로 평가됩니다. 보고는 처리 간 관찰된 상승도를 보여줍니다.

• Multi-armed bandit - 처리 간 트래픽 분할이 자동으로 처리됩니다. 7일마다 기본 지표의 성능을 검토하고 그에 따라 가중치를 조정합니다. A/B 테스트의 경우 보고는 상승도를 계속 표시합니다.

경로 실험의 {width="80%"}

➡️ A/B와 Multi-armed bandit 실험의 차이점에 대해 자세히 알아보기

게재에 보류 중 그룹을 추가하도록 선택할 수 있습니다. 이 그룹은 이 실험의 경로를 입력하지 않습니다.

각 처리​에 정확한 백분율을 할당하거나 균등 분포 토글 막대를 켜기만 하면 됩니다.

{width="80%"}

자동 크기 조정 실험을 활성화하여 실험의 가장 성과가 좋은 변형을 자동으로 롤아웃합니다. 우승자를 평가하는 방법에 대해 자세히 알아보기

만들기​를 클릭합니다.

실험 결과 각 분기에 대해 원하는 요소를 정의합니다. 예:

• 이메일 활동을 첫 번째 분기(처리 A)로 끌어서 놓습니다.

• 이틀 동안의 대기 활동을 첫 번째 분기로 끌어다 놓은 다음 이메일 활동(처리 B)을 끌어다 놓습니다.

• Email 활동을 세 번째 분기로 드래그한 다음 SMS 활동(처리 C)을 드래그합니다.

{width="100%"}

선택적으로 시간 초과 또는 오류 발생 시 대체 경로를 추가​하여 대체 동작을 정의합니다. 자세히 알아보기

여정 게시.

여정을 설정하고 필요에 따라 실험을 구성합니다. 자세히 알아보기

실험을 설정할 때 자동 크기 조정 옵션을 활성화합니다.

우승자의 배율을 조정해야 하는 시기를 선택합니다.

• 우승자를 찾는 즉시.
• 선택한 시간 동안 실험이 라이브 상태가 됩니다.

자동 크기 조정 시간은 실험 종료일 전에 예약해야 합니다. 종료 날짜 이후 시간으로 설정하면 유효성 검사 경고가 표시되고 여정이 게시되지 않습니다.

배율 시간별 우승자를 찾을 수 없는 경우 대체 동작을 선택하십시오.

• 예정대로 실험이 종료될 때까지 계속하십시오.
• 지정된 시간 후에 대체 치료의 크기를 조절하십시오.

여정을 설정하고 필요에 따라 실험을 구성합니다. 자세히 알아보기

승자가 확인되거나 통계적 유의성이 달성될 때까지 실험을 실행하게 한다.

여정을 열고 경로 실험이 포함된 최적화 활동을 선택합니다.

경로 실험 보기에서 결과를 검토하여 가장 성과가 좋은 처리를 식별하십시오.

치료 비율 조정​을 클릭하여 가장 성과가 좋은 치료를 나머지 대상자에게 푸시합니다.

드롭다운 메뉴에서 크기를 조정할 처리를 선택하고 크기 조정​을 클릭합니다.

{width="80%"}