설명서Journey OptimizerJourney Optimizer 안내서

콘텐츠 실험 만들기 content-experiment

Last update: Thu Dec 04 2025 00:00:00 GMT+0000 (Coordinated Universal Time)

작성 대상:

  • 초급
  • 사용자
NOTE
콘텐츠 실험으로 시작하기 전에 보고 구성이 사용자 지정 데이터 세트에 대해 설정되어 있는지 확인하십시오. 자세한 내용은 이 섹션을 참조하십시오.

Journey Optimizer 컨텐츠 실험 을 사용하면 타겟 대상자에게 가장 적합한 성과를 측정하기 위해 여러 게재 처리를 정의할 수 있습니다. 게재 콘텐츠 또는 주제를 변경하도록 선택할 수 있습니다. 관심 대상은 각 처리에 임의로 할당되어 지정된 지표 측면에서 가장 적합한 대상을 결정합니다.

아래 예에서 게재 대상은 두 그룹으로 분할되었으며, 각 그룹은 대상 모집단의 45%를 나타내고 홀드아웃 그룹은 10%로 게재를 받지 않습니다.

타겟팅된 대상의 각 사용자는 한 버전의 이메일을 받게 되며, 제목 줄은 다음 두 가지 중 하나입니다.

  • 새 컬렉션과 이미지에 대한 10% 오퍼를 직접 홍보합니다.
  • 나머지 한 곳은 이미지 없이 10% 할인을 명시하지 않고 스페셜 오퍼만 광고하고 있습니다.

여기의 목표는 받은 실험에 따라 수신자가 이메일과 상호 작용하는지 확인하는 것입니다. 따라서 이 콘텐츠 실험의 기본 목표 지표로 이메일 열기​를 선택합니다.

➡️ 콘텐츠 실험을 사용하여 이 사용 사례에서 코드 기반 경험 채널과 결정을 비교하는 방법에 대해 알아봅니다.

콘텐츠 만들기 campaign-experiment

  1. 먼저 요구 사항에 따라 campaign 또는 여정을(를) 만들고 구성합니다.

  2. 콘텐츠 편집 창에서 치료 A 개인화를 시작하십시오.

    이 처리를 위해 제목 줄에 직접 특별 오퍼를 지정하고 개인화를 추가합니다.

  3. 원래 콘텐츠를 만들거나 가져온 후 필요에 따라 개인화합니다.

콘텐츠 실험 구성 configure-experiment

AVAILABILITY
Dm은 홀드아웃 기능을 지원하지만 현재는 처리를 지원하지 않습니다.

콘텐츠 실험의 경우 세 가지 실험 유형 중에서 선택할 수 있습니다.

  • A/B 실험: 테스트 시작 시 처리 간 트래픽 분할을 정의합니다. 선택한 기본 지표인 Experimentation Accelerator을 기반으로 성능을 평가한 다음, 처리 간 관찰된 상승도를 보고합니다.

  • Multi-armed bandit: 처리 간 트래픽 분할이 자동으로 처리됩니다. 7일마다 기본 지표의 성능을 검토하고 그에 따라 가중치를 조정합니다. Experimentation Accelerator에서의 보고는 A/B 테스트로서 상승도를 계속 표시합니다.

  • 자체 Multi-armed bandit 가져오기: 처리 간 트래픽 분할이 자동으로 처리됩니다. 실험 API를 사용하여 할당을 실시간으로 조정하여 변경 시기와 방법을 유연하게 결정할 수 있습니다.

➡️ A/B와 Multi-armed bandit 실험의 차이점에 대해 자세히 알아보기

A/B 실험

  1. 메시지가 개인화되면 작업 탭에서 실험 만들기​를 클릭하여 콘텐츠 실험 구성을 시작합니다.

  2. 실험에 대해 설정할 성공 지표​를 선택하십시오.

    이 예제에서는 이메일 열기​를 선택하여 프로모션 코드가 제목 줄에 있는 경우 프로필이 이메일을 열는지 테스트합니다.

  3. 인앱 또는 웹 채널을 사용하여 실험을 설정하고 인바운드 클릭수, 고유 인바운드 클릭수, 페이지 보기 수 또는 고유 페이지 보기 수 지표 를 선택할 때 차원 필드를 사용하여 특정 페이지에서 클릭수 및 보기를 정확하게 추적하고 모니터링할 수 있습니다.

  4. API 트리거 캠페인을 만든 경우 실험 유형 드롭다운에서 A/B 실험​을(를) 선택합니다.

  5. 치료 추가​를 클릭하여 필요한 수만큼 새 치료를 만듭니다.

    note caution
    CAUTION
    코드 기반 실험을 생성할 때 다음 제한 사항에 유의하십시오.
    • 처리 수: 3~5개 이상의 처리를 만들면 성능 및 인터페이스 문제가 발생할 수 있습니다. 치료 추가 시 오류가 발생하면 치료 횟수를 줄이거나 문제가 해결될 때까지 점진적으로 추가해 봅니다.
    • 예약된 키워드: 처리 이름에 "홀드아웃"과 같은 예약된 키워드를 사용하지 마십시오. 이렇게 하면 의사 결정 노드 매핑 오류가 발생하고 실험이 올바르게 작동하지 않을 수 있습니다.

  6. 구분을 더 잘 하려면 치료의 제목​을 변경하십시오.

  7. 보류 중 그룹을 게재에 추가하도록 선택하십시오. 이 그룹은 이 캠페인으로부터 어떤 콘텐트도 받지 않습니다.

    토글 막대를 켜면 인구의 10%가 자동으로 사용됩니다. 필요한 경우 이 비율을 조정할 수 있습니다.

    note important
    IMPORTANT
    홀드아웃 그룹을 콘텐츠 실험을 위한 작업에 사용하는 경우 홀드아웃 할당은 해당 특정 작업에만 적용됩니다. 작업이 완료되면 홀드아웃 그룹의 프로필은 여정 경로를 계속 사용하며 다른 작업에서 메시지를 받을 수 있습니다. 따라서 후속 메시지가 홀드아웃 그룹에 있을 수 있는 프로필의 메시지 수신에 의존하지 않도록 하십시오. 보류 중인 할당을 제거해야 할 수도 있습니다.

  8. 그런 다음 각 처리​에 정확한 백분율을 할당하거나 균등 분포 토글 막대를 전환하도록 선택할 수 있습니다.

  9. 자동 크기 조정 실험을 활성화하여 실험의 가장 성과가 좋은 변형을 자동으로 롤아웃합니다. 우승자를 평가하는 방법에 대해 자세히 알아보기

  10. 구성이 설정되면 만들기​를 클릭합니다.

Multi-armed bandit

Multi-armed bandit 실험은 다음에서만 사용할 수 있습니다.

  • 인바운드 채널
  • 단일 여정
  • API 트리거 캠페인(트랜잭션 및 운영 모두)
  • 일정이 다시 발생하는 경우 아웃바운드 채널

  1. 메시지가 개인화되면 작업 탭에서 실험 만들기​를 클릭하여 콘텐츠 실험 구성을 시작합니다.

  2. 실험에 대해 설정할 성공 지표​를 선택하십시오.

    이 예제에서는 이메일 열기​를 선택하여 프로모션 코드가 제목 줄에 있는 경우 프로필이 이메일을 열는지 테스트합니다.

  3. API 트리거 캠페인을 만든 경우 실험 유형 드롭다운에서 Multi-armed bandit​을(를) 선택합니다.

  4. 치료 추가​를 클릭하여 필요한 수만큼 새 치료를 만듭니다.

  5. 구분을 더 잘 하려면 치료의 제목​을 변경하십시오.

  6. 보류 중 그룹을 게재에 추가하도록 선택하십시오. 이 그룹은 이 캠페인으로부터 어떤 콘텐트도 받지 않습니다.

    토글 막대를 켜면 인구의 10%가 자동으로 사용됩니다. 필요한 경우 이 비율을 조정할 수 있습니다.

    note important
    IMPORTANT
    홀드아웃 그룹을 콘텐츠 실험을 위한 작업에 사용하는 경우 홀드아웃 할당은 해당 특정 작업에만 적용됩니다. 작업이 완료되면 홀드아웃 그룹의 프로필은 여정 경로를 계속 사용하며 다른 작업에서 메시지를 받을 수 있습니다. 따라서 후속 메시지가 홀드아웃 그룹에 있을 수 있는 프로필의 메시지 수신에 의존하지 않도록 하십시오. 보류 중인 할당을 제거해야 할 수도 있습니다.

Multi-armed bandit 가져오기

Bring your own Multi-armed bandit 실험은 다음에서만 사용할 수 있습니다.

  • 인바운드 채널
  • 단일 여정
  • API 트리거 캠페인(트랜잭션 및 운영 모두)
  • 일정이 다시 발생하는 경우 아웃바운드 채널

  1. 메시지가 개인화되면 작업 탭에서 실험 만들기​를 클릭하여 콘텐츠 실험 구성을 시작합니다.

  2. 실험에 대해 설정할 성공 지표​를 선택하십시오.

    이 예제에서는 이메일 열기​를 선택하여 프로모션 코드가 제목 줄에 있는 경우 프로필이 이메일을 열는지 테스트합니다.

  3. API 트리거 캠페인을 만든 경우 실험 유형 드롭다운에서 Multi-armed bandit 가져오기​를 선택합니다.

  4. 치료 추가​를 클릭하여 필요한 수만큼 새 치료를 만듭니다.

  5. 구분을 더 잘 하려면 치료의 제목​을 변경하십시오.

  6. 보류 중 그룹을 게재에 추가하도록 선택하십시오. 이 그룹은 이 캠페인으로부터 어떤 콘텐트도 받지 않습니다.

    토글 막대를 켜면 인구의 10%가 자동으로 사용됩니다. 필요한 경우 이 비율을 조정할 수 있습니다.

    note important
    IMPORTANT
    홀드아웃 그룹을 콘텐츠 실험을 위한 작업에 사용하는 경우 홀드아웃 할당은 해당 특정 작업에만 적용됩니다. 작업이 완료되면 홀드아웃 그룹의 프로필은 여정 경로를 계속 사용하며 다른 작업에서 메시지를 받을 수 있습니다. 따라서 후속 메시지가 홀드아웃 그룹에 있을 수 있는 프로필의 메시지 수신에 의존하지 않도록 하십시오. 보류 중인 할당을 제거해야 할 수도 있습니다.

트리트먼트 디자인 treatment-experiment

  1. 콘텐츠 편집 창에서 치료 B를 선택하여 콘텐츠를 변경합니다.

    여기서는 제목 줄​에 오퍼를 지정하지 않도록 선택합니다.

  2. 전자 메일 본문 편집​을 클릭하여 치료 B를 추가로 개인화합니다.

  3. 치료를 디자인한 후 추가 작업​을(를) 클릭하여 치료와 관련된 옵션에 액세스합니다. 이름 바꾸기, 복제 및 삭제.

  4. 필요한 경우 실험 설정 메뉴에 액세스하여 처리 구성을 변경합니다.

  5. 메시지 콘텐츠가 정의되면 콘텐츠 시뮬레이션 단추를 클릭하여 게재 렌더링을 제어하고 테스트 프로필로 개인화 설정을 확인합니다. 자세히 알아보기

실험을 구성한 다음에는 보고서를 통해 게재의 성공을 추적할 수 있습니다. 자세히 알아보기

우승자 비율 조정 scale-winner

AVAILABILITY
우승자 크기 조정 기능은 현재 다음 채널에 대해 지원됩니다.
  • 모든 여정 또는 캠페인의 인바운드 채널(예: 웹, 인앱 메시지, 코드 기반 경험)
  • API 트리거 트랜잭션 캠페인의 아웃바운드 채널(예: 이메일, 푸시 알림, SMS).

우승자 적용 확대 기능을 사용하면 실험에서 우승한 베리에이션을 전체 대상자에게 자동 또는 수동으로 롤아웃할 수 있습니다. 이 기능은 일단 승자가 결정되면 실험을 지속적으로 모니터링하지 않고 도달 범위와 효과를 증폭시킬 수 있도록 한다.

다음 두 모드 중에서 선택할 수 있습니다.

  • 자동 크기 조정: 실험을 만들 때 승자 처리 또는 승자가 나타나지 않을 경우 대체 옵션에 대한 크기 조정 시기와 조건을 선택하여 자동 크기 조정 설정을 구성합니다.

  • 수동 크기 조정: 수동으로 실험 결과를 검토하고 가장 성과가 좋은 치료의 롤아웃을 시작하여 시기와 결정에 대한 모든 권한을 유지합니다.

자동 확장 autoscaling

자동 크기 조절을 사용하면 실험 결과에 따라 채택 처리 또는 대체 처리 롤아웃 시기에 대한 사전 정의된 규칙을 설정할 수 있습니다.

자동 확장이 발생하면 수동 확장을 더 이상 사용할 수 없습니다.

실험에서 자동 크기 조절을 활성화하려면 다음을 수행합니다.

  1. 캠페인이나 여정을 설정하고 필요에 따라 실험을 구성합니다. 자세히 알아보기

  2. 실험을 설정할 때 자동 크기 조정 옵션을 활성화합니다.

  3. 우승자의 배율을 조정해야 하는 시기를 선택합니다.

    • 우승자를 찾는 즉시.
    • 선택한 시간 동안 실험이 라이브 상태가 됩니다.

    자동 크기 조정 시간은 실험 종료일 전에 예약해야 합니다. 종료 날짜 이후 시간으로 설정하면 유효성 검사 경고가 표시되고 캠페인이나 여정이 게시되지 않습니다.

  4. 배율 시간별 우승자를 찾을 수 없는 경우 대체 동작을 선택하십시오.

    • 예정대로 실험이 종료될 때까지 계속하십시오.
    • 지정된 시간 후에 대체 치료의 크기를 조절하십시오.

모든 매개 변수가 충족되면 우승 또는 대체 치료가 대상자에게 전송됩니다.

수동 크기 조정 manual-scaling

수동 스케일링은 실험 결과를 검토하고 당첨 치료의 출시 시기를 자신의 일정에 따라 결정할 수 있는 기능을 제공합니다.

예약된 자동 크기 조정 시간 전에 수동으로 승자의 크기를 조정하는 경우 자동 크기 조정이 취소됩니다.

실험의 승자를 수동으로 조정하려면 다음을 수행합니다.

  1. 캠페인이나 여정을 설정하고 필요에 따라 실험을 구성합니다. 자세히 알아보기

  2. 승자가 확인되거나 통계적 유의성이 달성될 때까지 실험을 실행하게 한다.

  3. 캠페인 대시보드를 열거나 여정에서 채널 활동을 선택합니다.

    콘텐츠 실험 메뉴의 결과를 검토하여 가장 성과가 좋은 처리를 식별하십시오.

  4. 치료 비율 조정​을 클릭하여 가장 성과가 좋은 치료를 나머지 대상자에게 푸시합니다.

  5. 드롭다운 메뉴에서 크기를 조정할 처리를 선택하고 크기 조정​을 클릭합니다.

치료의 크기를 조정하는 데 최대 1시간이 소요될 수 있습니다. 수동 배율 조정 프로세스가 완료되면 알림을 받게 됩니다.

recommendation-more-help
b22c9c5d-9208-48f4-b874-1cefb8df4d76