Padexperimenten gebruiken experimentation
Met behulp van experimenten kunt u verschillende paden testen op basis van een willekeurige splitsing om te bepalen wat het beste werkt op basis van vooraf gedefinieerde succeswaarden.
Volg onderstaande stappen om padexperimenten in te stellen voor een rit.
Stel dat u drie paden wilt vergelijken:
- één pad met één e-mail;
- een tweede pad met een knooppunt Wait van twee dagen en een e-mail;
- een derde pad met een e-mail en vervolgens een SMS-bericht.
-
Sleep vanuit de sectie Orchestration de Optimize -activiteit naar het canvas van de reis.
-
Voeg een optioneel label toe, dat nuttig kan zijn om de activiteit in rapporterings- en testmoduslogboeken te identificeren.
-
Selecteer Experiment in de vervolgkeuzelijst Method .
-
Klik op Create experiment.
-
Selecteer de Success metric die u voor het experiment wilt instellen. Leer meer op de beschikbare metriek en hoe te om de lijst in te vormen deze sectie .
-
Selecteer de Experiment type voor het padexperiment:
-
A/B experiment — Definieer de verkeersverdeling tussen de behandelingen aan het begin van de test. De prestaties worden beoordeeld op basis van de gekozen primaire maatstaf. De rapportage toont de waargenomen lift tussen de behandelingen.
-
Multi-armed bandit — Verkeer dat wordt opgesplitst tussen behandelingen wordt automatisch afgehandeld. Om de 7 dagen, worden de prestaties op primaire metrisch beoordeeld, en de gewichten worden dienovereenkomstig aangepast. Uit de rapportage blijkt nog steeds dat er lift is, zoals bij A/B-tests.
➡️ Leer meer over het verschil tussen A/B en Multi-gewapende bandit experimenten
-
-
U kunt desgewenst een Holdout -groep toevoegen aan uw levering. Deze groep zal geen weg van dit experiment ingaan.
note note NOTE Als u de schakelbalk inschakelt, neemt 10% van de bevolking automatisch aan. U kunt dit percentage desgewenst aanpassen. -
U kunt een exact percentage toewijzen aan elke Treatment of gewoon de schakelbalk van Distribute evenly inschakelen.
-
Laat het auto-schaalexperiment toe om de winnende variatie van uw experiment automatisch uit te rollen. Leer meer op hoe te om winnaar te schrapen
-
Klik op Create.
-
Definieer de elementen die u wilt gebruiken voor elke vertakking die het resultaat is van het experiment, bijvoorbeeld:
-
De belemmering en laat vallen een E-mail activiteit op de eerste tak (Behandeling A).
-
De belemmering en laat vallen a wacht activiteit van twee dagen op de eerste tak, die door een wordt gevolgd e-mail activiteit (Behandeling B).
-
De belemmering en laat vallen een E-mail activiteit op de derde tak, die door een wordt gevolgd SMS activiteit (Behandeling C).
-
-
U kunt ook de Add an alternative path in case of a timeout or an error gebruiken om een fallback-actie te definiëren. Meer informatie
-
publiceer uw reis.
Zodra de reis levend is, worden de gebruikers willekeurig toegewezen om verschillende wegen te gaan. Journey Optimizer houdt bij welk pad het beste presteert en biedt activeerbare inzichten.
Volg het succes van uw reis met het rapport van de Experiment van de Weg van de Reis. Meer informatie
Gebruiksscenario's bij experimenten uc-experiment
In de volgende voorbeelden ziet u hoe u de Optimize -activiteit met de Experiment -methode gebruikt om te bepalen welk pad het beste werkt.
Test of het verzenden van het eerste bericht via e-mail versus SMS tot hogere omzettingen leidt.
➡️ Gebruik de conversiesnelheid als de succesmaatstaf (bijvoorbeeld aankopen, aanmelden).
Voer een experiment uit om te controleren of het verzenden van één e-mail versus drie e-mails over een week meer aankopen oplevert.
➡️ Gebruik aankopen of de afmeldingsfrequentie als de maatstaf voor succes.
Vergelijk een wachttijd van 24 uur in vergelijking met een wachttijd van 72 uur vóór een follow-up om te bepalen welke timing de betrokkenheid maximaliseert.
➡️ Gebruik de doorklikfrequentie of de opbrengst als succesmetrisch.
De winnaar schalen scale-winner
Schaal de Winner laat u toe om de het winnen variatie van een experiment aan uw volledige publiek automatisch of manueel uit te rollen. Met deze functie kunt u het bereik en de doeltreffendheid van de functie vergroten wanneer een winnaar eenmaal is aangewezen, zonder dat u het experiment voortdurend hoeft te volgen.
U kunt kiezen uit twee modi:
-
auto-schrapen: Vorm auto-schrapende montages wanneer het creëren van uw experiment door de timing en de voorwaarden voor het schrapen van de het winnen behandeling of een fallback optie te kiezen als geen winnaar verschijnt.
-
Handmatig Schalen: Herzie manueel experimenteerresultaten en stel de terugwinning van de het winnen behandeling in werking, die volledige controle over timing en besluiten handhaaft.
Automatisch schalen autoscaling
Met Automatisch schalen kunt u vooraf gedefinieerde regels instellen voor het tijdstip waarop de winnende bewerking of een fallback moet worden uitgevoerd, op basis van de resultaten van het experiment.
Wanneer automatisch schalen is opgetreden, is handmatig schalen niet meer beschikbaar.
Automatisch schalen inschakelen voor experimenten:
-
Stel uw reis in en configureer uw experiment naar wens. Meer informatie
-
Schakel de optie voor automatisch schalen in wanneer u het experiment instelt.
-
Selecteer wanneer de winnaar moet worden geschaald:
- Zodra de winnaar is gevonden.
- Na het experiment wordt live gedurende de geselecteerde tijd uitgevoerd.
De automatisch schaalbare tijd moet voor de einddatum van het experiment zijn gepland. Als deze voor een tijd na de einddatum wordt ingesteld, verschijnt er een validatiewaarschuwing en wordt de reis niet gepubliceerd.
-
Kies het terugvalgedrag als er geen winnaar is gevonden op schaaltijd:
- Ga door met experimenteren tot de geplande einddatum.
- Schaal de alternatieve behandeling na een bepaalde tijd.
Wanneer aan alle parameters is voldaan, wordt de winnende of alternatieve behandeling naar uw publiek verzonden.
Handmatige schaling manual-scaling
Met handmatig schalen kunt u de resultaten van het experiment bekijken en bepalen wanneer u de winnende behandeling volgens uw eigen schema wilt uitvoeren.
Als u de winnaar handmatig schaalt vóór de geplande tijd voor automatisch schalen, wordt de automatische schaling geannuleerd.
De winnaar van uw experimenten handmatig schalen:
-
Stel uw reis in en configureer uw experiment naar wens. Meer informatie
-
Laat het experiment lopen totdat een winnaar is geïdentificeerd of statistische significantie is bereikt.
-
Open uw reis en selecteer de Optimize activiteit die het wegexperiment bevat.
Bekijk de resultaten in de Path experiment -weergave om de best presterende behandeling te identificeren.
-
Klik op Scale treatment om de winnende bewerking door te voeren naar de rest van uw publiek.
-
Selecteer in de keuzelijst de behandeling die u wilt schalen en klik op Scale .
Let erop dat het schalen van de behandeling maximaal één uur kan duren. U ontvangt een melding als het handmatig schalen is voltooid.