Använd sökvägsexperiment experimentation
Experimentation gör att du kan testa olika banor baserat på en slumpmässig delning för att avgöra vilken som fungerar bäst baserat på fördefinierade framgångsmått.
Följ stegen nedan för att konfigurera sökvägsexperiment under en resa.
Låt oss säga att du vill jämföra tre banor:
- en sökväg med ett e-postmeddelande,
- en andra sökväg med en Wait-nod på två dagar och ett e-postmeddelande,
- en tredje sökväg med ett e-postmeddelande och sedan ett SMS-meddelande.
-
Dra och släpp Orchestration-aktiviteten från avsnittet Optimize till arbetsytan för resan.
-
Lägg till en valfri etikett, som kan vara användbar för att identifiera aktiviteten i loggar för rapportering och testläge.
-
Välj Experiment i listrutan Method.
-
Klicka på Create experiment.
-
Välj den Success metric som du vill ange för ditt experiment. Läs mer om tillgängliga mätvärden och hur du konfigurerar listan i det här avsnittet.
-
Välj Experiment type för sökvägsexperimentet:
-
A/B experiment - Definiera trafikuppdelningen mellan behandlingarna i början av testet. Prestanda utvärderas baserat på det primära mätresultat du valt. Rapporteringen visar den observerade lyften mellan behandlingarna.
-
Multi-armed bandit - Trafikdelning mellan behandlingar hanteras automatiskt. Var 7:e dag granskas resultatet för det primära mätvärdet och vikterna justeras därefter. Rapporteringen fortsätter att visa lyft, som vid A/B-tester.
➡️ Läs mer om skillnaden mellan A/B-experiment och multiväpnade bandit-experiment
-
-
Du kan lägga till en Holdout-grupp i leveransen. Den här gruppen kommer inte att ange någon sökväg från det här experimentet.
note note NOTE Om du aktiverar alternativfältet tar det automatiskt 10 % av din befolkning. Du kan justera procentandelen om det behövs. -
Du kan tilldela en exakt procentandel till varje Treatment, eller bara växla på Distribute evenly-växlingsfältet.
-
Gör det möjligt för det automatiska skalningsförsöket att automatiskt ta fram den vinnande variationen av ditt experiment. Läs mer om hur du kan skala vinnaren
-
Klicka på Create.
-
Definiera elementen som du vill ha för varje gren som är resultatet av Experiment, till exempel:
-
Dra och släpp en e-post-aktivitet till den första grenen (Behandling A).
-
Dra och släpp en Wait-aktivitet på två dagar till den första grenen, följt av en Email-aktivitet (Treatment B).
-
Dra och släpp en e-post-aktivitet till den tredje grenen, följt av en SMS-aktivitet (Behandling C).
-
-
Du kan också använda Add an alternative path in case of a timeout or an error för att definiera en reservåtgärd. Läs mer
-
Publicera din resa.
När resan är live tilldelas användarna slumpvis olika vägar. Journey Optimizer spårar vilken sökväg som fungerar bäst och ger åtgärdbara insikter.
Följ framgången på din resa med rapporten"Journey Path Experiment". Läs mer
Exempel på användningsområden uc-experiment
I följande exempel visas hur du använder aktiviteten Optimize med metoden Experiment för att avgöra vilken sökväg som fungerar bäst generellt.
Testa om det första meddelandet skickas via e-post eller SMS leder till högre konverteringar.
➡️ Använd konverteringsgraden som framgångsmått (till exempel köp, registreringar).
Kör ett experiment för att kontrollera om ett e-postmeddelande eller tre e-postmeddelanden under en vecka leder till fler inköp.
➡️ Använd köp eller avbeställningsfrekvensen som framgångsmått.
Jämför en 24-timmars väntan jämfört med en 72-timmars väntan före en uppföljning för att avgöra vilken tidpunkt som maximerar engagemanget.
➡️ Använd genomklickningsfrekvensen eller intäkterna som framgångsmått.
Skala vinnaren scale-winner
Skala vinnaren så att ni automatiskt eller manuellt kan lansera den vinnande varianten av ett experiment till er fulla publik. Den här funktionen ser till att du när en vinnare väl har fastställts kan utöka dess räckvidd och effektivitet utan att hela tiden övervaka experimentet.
Du kan välja mellan två lägen:
-
Automatisk skalning: Konfigurera inställningar för automatisk skalförändring när du skapar ditt experiment genom att välja tid och villkor för skalning av den vinnande behandlingen eller ett reservalternativ om ingen vinnare kommer.
-
Manuell skalning: Granska experimentresultat manuellt och initiera utrullningen av den vinnande behandlingen, med bibehållen fullständig kontroll över tid och beslut.
Automatisk skalning autoscaling
Med automatisk skalförändring kan du ange fördefinierade regler för när den vinnande behandlingen eller en reservbehandling ska börja, baserat på resultatet av experimentet.
Observera att när automatisk skalförändring har inträffat är manuell skalförändring inte längre tillgängligt.
Så här aktiverar du automatisk skalförändring i dina experiment:
-
Konfigurera din resa och experimentera efter behov. Läs mer
-
Aktivera alternativet för automatisk skalförändring när du ställer in ditt experiment.
-
Välj när vinnaren ska skalas:
- Så snart vinnaren hittas.
- Efter att experimentet är live för den valda tiden.
Tiden för automatisk skalförändring måste schemaläggas före experimentets slutdatum. Om det är inställt för en tid efter slutdatumet visas en valideringsvarning och resan publiceras inte.
-
Välj reservbeteendet om ingen vinnare hittas efter skaltid:
- Fortsätt experimentera tills det är slut enligt schema.
- Skala den alternativa behandlingen efter en viss tid.
När alla parametrar är uppfyllda skickas din vinnande eller alternativa behandling till din målgrupp.
Manuell skalning manual-scaling
Manuell skalförändring ger dig möjlighet att granska experimentresultat och bestämma när den vinnande behandlingen ska lanseras enligt ditt eget schema.
Observera att om du skalförändrar vinnaren manuellt före den schemalagda tiden för automatisk skalförändring avbryts den automatiska skalförändringen.
Så här skalar du vinnaren av dina experiment manuellt:
-
Konfigurera din resa och experimentera efter behov. Läs mer
-
Låt experimentet löpa tills en vinnare identifieras eller statistisk signifikans uppnås.
-
Öppna din resa och välj aktiviteten Optimize som innehåller sökvägsexperimentet.
Granska resultaten i Path experiment-vyn för att identifiera den bästa behandlingen.
-
Klicka på Scale treatment om du vill skicka den vinnande behandlingen till resten av publiken.
-
Välj den behandling som du vill skala i listrutan och klicka på Scale.
Observera att det kan ta upp till en timme innan behandlingen skalas. Du får ett meddelande när den manuella skalförändringsprocessen är klar.