Un Allocazione automatica attività in Adobe Target identifica un vincitore tra due o più esperienze e ridistribuisce automaticamente più traffico per aumentare le conversioni, mentre il test continua a essere eseguito e ad apprendere.
Durante la creazione di un’attività A/B tramite il flusso di lavoro guidato in tre passaggi, puoi scegliere Allocazione automatica all’esperienza migliore opzione.
I test A/B standard hanno un costo intrinseco. Devi investire del traffico per misurare le prestazioni di ogni esperienza e capire quale sia l’esperienza vincente attraverso l’analisi. La distribuzione del traffico rimane fissa anche dopo aver compreso che alcune esperienze hanno prestazioni migliori di altre. Inoltre, è complicato calcolare la dimensione necessaria del campione, e l’attività deve essere eseguita completamente prima di poter intervenire in base al vincitore. E c'è ancora la possibilità che il vincitore identificato non sia un vero vincitore.
L’allocazione automatica riduce il costo e il sovraccarico associati al determinare un’esperienza vincente. L’allocazione automatica monitora le prestazioni della metrica obiettivo di tutte le esperienze e invia in modo proporzionale un numero maggiore di nuovi partecipanti alle esperienze che hanno prestazioni migliori. Per l’esplorazione delle altre esperienze viene riservata una quantità adeguata di traffico. È possibile vedere i vantaggi del test nei risultati, anche se l’attività è ancora in esecuzione: l’ottimizzazione si verifica in parallelo all’apprendimento.
L’allocazione automatica sposta gradualmente i visitatori verso esperienze vincenti, invece di richiedere di attendere fino a quando un’attività finisce per determinare un vincitore. Puoi beneficiare di incrementi più rapidi perché potenziali esperienze vincenti vengono mostrate a partecipanti che sarebbero altrimenti stati destinati a esperienze di minor successo.
Un normale test A/B in Target mostra solo confronti a coppie di sfidanti con controllo. Ad esempio, se un’attività dispone di esperienze: A, B, C e D dove A è il controllo, un normale Target Il test A/B confronta A con B, A con C e A con D.
In tali test, la maggior parte dei prodotti, tra cui Target, utilizza un Test t di Welch per ottenere un livello di affidabilità basato sul valore p. Questo valore di affidabilità viene quindi utilizzato per determinare se lo sfidante è sufficientemente diverso dal controllo. Tuttavia, Target non esegue automaticamente i confronti impliciti (B con C, B con D e C con D) necessari per trovare l’esperienza “migliore”. Di conseguenza, l’addetto al marketing deve analizzare manualmente i risultati per determinare l’esperienza “migliore”.
L’allocazione automatica esegue tutti i confronti impliciti tra le esperienze e produce un vincitore “reale”. Non vi è alcuna nozione di esperienza di “controllo” nel test.
Allocazione automatica assegna in modo intelligente nuovi visitatori alle esperienze fino a quando l’intervallo di affidabilità della migliore esperienza non si sovrappone a quello di qualsiasi altra esperienza. Normalmente questo processo potrebbe produrre falsi positivi, ma Allocazione automatica utilizza intervalli di affidabilità basati su Disuguaglianza di Bernstein che compensa le valutazioni ripetute. A questo punto, c'è un vero vincitore. Quando Allocazione automatica si ferma, purché non vi sia una dipendenza sostanziale dal tempo per i visitatori che arrivano alla pagina, c’è almeno un 95% di possibilità che Allocazione automatica restituisce un’esperienza la cui vera risposta non è peggiore dell’1% (relativo) rispetto alla vera risposta dell’esperienza vincente.
I seguenti termini sono utili quando si parla di Allocazione automatica:
Slot machine: un approccio all’ottimizzazione ti tipo slot machine compensa l’apprendimento esplorativo e il suo sfruttamento.
La logica complessiva alla base di Allocazione automatica incorpora sia le prestazioni misurate (come il tasso di conversione) che gli intervalli di affidabilità dei dati cumulativi. A differenza di un test A/B standard in cui il traffico viene suddiviso in modo uniforme tra le esperienze, Allocazione automatica modifica l’allocazione del traffico tra le esperienze.
L'approccio slot machine consente di riservare alcune esperienze all’esplorazione, sfruttando le esperienze che danno buoni risultati. Un numero maggiore di nuovi visitatori vedrà le esperienze migliori, ma sarà comunque possibile reagire in caso di condizioni mutevoli. Questi modelli si aggiornano almeno una volta all'ora per assicurarsi che il modello reagisca ai dati più recenti.
Man mano che più visitatori accedono all’attività, alcune esperienze iniziano a dimostrarsi di maggior successo e viene quindi incrementato il traffico inviato a tali esperienze. Il 20% del traffico continua a contribuire casualmente all’esplorazione di tutte le esperienze. Se una delle esperienze dalle prestazioni peggiori inizia a ottenere risultati migliori, le viene allocato più traffico. Oppure se il successo di un’attività con ottime prestazioni diminuisce, le viene assegnato meno traffico. Questo si verifica ad esempio se i visitatori cercano informazioni diverse sul tuo sito multimediale a causo di un particolare evento oppure se le offerte speciali del fine settimana nel tuo sito retail generano risultati diversi.
Nell'illustrazione seguente viene mostrato come potrebbe comportarsi l'algoritmo durante un test con quattro esperienze:
L'illustrazione mostra come il traffico assegnato a ogni esperienza progredisca nell'acro di parecchi turni della durata dell'attività, finché non sia possibile determinare un chiaro vincitore.
Turno | Descrizione |
---|---|
![]() |
Turno di riscaldamento (0): durante il turno di riscaldamento, ogni esperienza ottiene pari ripartizione del traffico fino a quando ogni esperienza in attività ha un minimo di 1.000 visitatori e 50 conversioni.
Solo due esperienze progrediscono al turno successivo: D e C. Progredire significa che alle due esperienze è assegnato l’80% del traffico in parti uguali. Le altre due esperienze continuano a partecipare, ma vengono gestite solo come parte dell’allocazione casuale del traffico del 20% quando nuovi visitatori accedono all’attività. Tutte le allocazioni vengono aggiornate ogni ora (mostrato in alto per turni lungo l'asse x). Dopo ogni turno, i dati cumulativi vengono confrontati. |
![]() |
Turno 1: durante questo turno, l’80% di traffico è assegnato alle esperienze C e D (40% ciascuna). Il 20% del traffico viene assegnato in modo casuale alle esperienze A, B, C e D (5% ciascuna). Durante questo turno, l'esperienza A registra buoni risultati.
|
![]() |
Turno 2: durante questo turno, l’80% del traffico è assegnato alle esperienze A e D (40% ciascuna). Il 20% del traffico è allocato in modo casuale, quindi A, B, C e D ricevono rispettivamente il 5% del traffico. Durante questo turno, l’esperienza B registra buoni risultati.
|
![]() |
Turno 3: durante questo turno, l’80% di traffico è assegnato alle esperienze B e D (40% ciascuna). Il 20% del traffico è allocato in modo casuale, quindi A, B, C e D ricevono rispettivamente il 5% del traffico. Durante questo turno, l'esperienza D continua a fornire buoni risultati, così come l'esperienza C.
|
![]() |
Turno 4: durante questo turno, l’80% di traffico è assegnato alle esperienze C e D (40% ciascuna). Il 20% del traffico è allocato in modo casuale, quindi A, B, C e D ricevono rispettivamente il 5% del traffico. Durante questo turno, l'esperienza C risulta avere buone prestazioni.
|
![]() |
Turno n: mentre l'attività progredisce, inizia a emergere un'esperienza con prestazioni elevate e il processo continua fino a individuare un'esperienza vincente. Quando l’intervallo di affidabilità dell’esperienza con il tasso di conversione più alto non si sovrappone all’intervallo di affidabilità di qualsiasi altra esperienza, viene etichettato come vincitore. A il badge viene visualizzato sulla pagina dell’attività vincente e nella Attività elenco.
Importante: se scegliessi manualmente un vincitore in una fase precedente del processo, rischieresti di scegliere l’esperienza sbagliata. Per questo motivo, è consigliabile attendere che l’algoritmo determini l’esperienza vincente. |
Se un’attività ha solo due esperienze, entrambe ottengono lo stesso traffico fino al Target trova un’esperienza vincente con un’affidabilità del 75%. A quel punto, due terzi del traffico vengono assegnati al vincitore e un terzo al perdente. Successivamente, quando un’esperienza raggiunge il 95% di affidabilità, il 90% del traffico viene assegnato al vincitore e il 10% al perdente. Target mantiene sempre del traffico inviato all’esperienza "perdente" per evitare alla fine falsi positivi (ovvero, mantieni un po’ di esplorazione).
Dopo un Allocazione automatica Se l’attività è attivata, non sono consentite le seguenti operazioni dall’interfaccia utente:
Per ulteriori informazioni, consulta L’allocazione automatica può fornire risultati di test più rapidi e ricavi più elevati rispetto a un test manuale
Il Allocazione automatica Questa funzione funziona con una sola impostazione metrica avanzata: Incrementa il conteggio e mantieni l'utente attivo
Le seguenti impostazioni di metrica avanzate non sono supportate: Incrementa il conteggio, Rilascia utente, Consenti reinserimento e conteggio incrementi, e Rilascia utente e impedisci nuovo accesso.
I visitatori di ritorno frequenti possono gonfiare i tassi di conversione dell’esperienza.
Se un visitatore che vede l’esperienza A torna frequentemente e la sua conversione si verifica più volte, il tasso di conversione (CR) dell’esperienza A aumenta artificialmente. Confronta questo risultato con l’esperienza B, dove i visitatori si convertono ma non tornano spesso. Di conseguenza, il CR dell’esperienza A ha un aspetto migliore del CR dell’esperienza B, pertanto è più probabile che i nuovi visitatori vengano assegnati ad A che a B. Se scegli di contare una volta per partecipante, il CR di A e CR di B potrebbero essere identici.
Se i visitatori di ritorno sono distribuiti in modo casuale, è più probabile che il loro effetto sui tassi di conversione venga mitigato. Per attenuare questo effetto, è consigliabile modificare il metodo di conteggio della metrica obiettivo per conteggiare ogni partecipante una sola volta.
Differenzia fra esperienze con prestazioni elevate, non fra quelle con prestazioni inferiori.
La funzione Allocazione automatica è in grado di distinguere tra le esperienze dalle prestazioni migliori (e trovare un vincitore). Ci potrebbero essere momenti in cui non vi è abbastanza differenziazione tra le esperienze con prestazioni inferiori.
Se desideri produrre una differenziazione statisticamente significativa tra tutte le esperienze, puoi utilizzare la modalità di allocazione manuale del traffico.
I tassi di conversione correlati al tempo (o contestualmente variabili) possono distorcere le proporzioni di allocazione.
Alcuni fattori che possono essere ignorati durante un test A/B standard perché influiscono ugualmente su tutte le esperienze non possono essere ignorati in un Allocazione automatica test. L'algoritmo è sensibile ai tassi di conversione osservati. Di seguito sono riportati alcuni esempi di fattori che possono influenzare le prestazioni dell'esperienza in modo disuguale:
Esperienze con diversa rilevanza contestuale (tempo, posizione, genere e così via).
Ad esempio:
L’utilizzo di esperienze con rilevanza contestuale variabile può distorcere i risultati in un Allocazione automatica più che in un test A/B, perché analizza i risultati su un periodo più lungo.
Esperienze con ritardi diversi nella conversione possono essere dovute all’urgenza del messaggio.
Ad esempio, “i saldi al 30% finiscono oggi” incita il visitatore ad eseguire oggi stesso la conversione, mentre “50% di sconto sul primo acquisto” non crea lo stesso senso di urgenza.
Consulta le seguenti domande frequenti e risposte mentre lavori con Allocazione automatica attività:
Sì. Per ulteriori informazioni, consulta Supporto di A4T per attività di allocazione automatica e targeting automatico.
No. Solo i nuovi visitatori vengono allocati automaticamente. I visitatori di ritorno continuano a vedere la loro esperienza originale per proteggere la validità del test A/B.
L’algoritmo garantisce un'affidabilità del 95% o un tasso di falsa positività del 5% se si attende che appaia il badge del vincitore.
L’algoritmo inizia a funzionare dopo che tutte le esperienze nell’attività hanno un minimo di 1.000 visitatori e 50 conversioni.
L’80% del traffico viene gestito tramite Allocazione automatica e il 20% del traffico viene servito in modo casuale. Quando viene identificato un vincitore, a tutto l'80% del traffico viene veicolata l’esperienza vincente, mentre tutte le esperienze continuano a ricevere un certo traffico come parte del 20%, compresa quella vincente.
Sì. Con un approccio di tipo slot machine, almeno il 20% del traffico è riservato all’esplorazione di modifiche nei pattern o nei tassi di conversione in tutte le esperienze.
Finché tutte le esperienze ottimizzate avranno ritardi simili, il comportamento sarà lo stesso di un’attività con un ciclo di conversione più veloce. Tuttavia, il raggiungimento della soglia di conversione di 50 richiede più tempo prima dell’inizio del processo di allocazione del traffico.
La funzione Personalizzazione automatizzata utilizza gli attributi del profilo di ogni visitatore per determinare l'esperienza migliore. In tal modo, non solo ottimizza, ma personalizza anche l’attività per quell’utente.
Allocazione automaticaD’altra parte, è un test A/B che produce un vincitore aggregato (l’esperienza più popolare, ma non necessariamente quella più efficace per ogni visitatore).
Attualmente, la logica favorisce i visitatori che si convertono rapidamente o che effettuano visite più frequenti, perché tali visitatori aumentano temporaneamente il tasso di conversione complessivo dell’esperienza a cui appartengono. L’algoritmo si regola frequentemente, quindi l’aumento del tasso di conversione viene amplificato in ogni istantanea. Se il sito riceve numerosi visitatori di ritorno, le loro conversioni possono potenzialmente aumentare il tasso di conversione complessivo per l’esperienza a cui appartengono. C'è una buona probabilità che i visitatori di ritorno siano distribuiti in modo casuale, nel qual caso l’effetto aggregato (aumento dell’incremento) è mitigato. Per attenuare questo effetto, è consigliabile modificare il metodo di conteggio della metrica di sucesso per conteggiare ogni partecipante una sola volta.
È possibile utilizzare il Adobe Target Calcolatore dimensioni campione per ottenere una stima della durata dell’esecuzione del test. (Come con i tradizionali test A/B, applica la correzione Bonferroni se stai sottoponendo a test più di due offerte o più di una metrica/ipotesi di conversione.) Questo calcolatore è progettato per il tradizionale test A/B a orizzonte fisso e fornisce solo una stima. Utilizzo della calcolatrice per un Allocazione automatica l’attività è facoltativa perché Allocazione automatica dichiara un vincitore per te. Non è necessario scegliere un punto fisso nel tempo per esaminare i risultati del test. I valori forniti sono sempre statisticamente validi.
Nei nostri esperimenti, abbiamo trovato quanto segue:
Non c’è motivo di rimuovere un’esperienza insoddisfacente. Allocazione automatica trasmette automaticamente le esperienze con prestazioni migliori più spesso e fornisce quelle con prestazioni inferiori con minore frequenza. Lasciare un’esperienza insoddisfacente nell’attività non influisce in modo significativo sulla velocità per determinare un vincitore.
Il 20% dei visitatori viene assegnato in modo casuale attraverso tutte le esperienze. La quantità di traffico utilizzata per un’esperienza insoddisfacente è minima (20% diviso per il numero di esperienze).
Adobe sconsiglia di modificare la metrica obiettivo a metà strada attraverso un’attività. Anche se è possibile modificare la metrica dell’obiettivo durante un’attività utilizzando l’interfaccia utente Target, è sempre necessario avviare una nuova attività. Adobe non garantisce ciò che accade se modifichi la metrica di obiettivo in un’attività dopo l’esecuzione.
Questo consiglio si applica alle attività Allocazione automatica, Targeting automatico e Automated Personalization che utilizzano Target o Analytics (A4T) come origine per la generazione di rapporti.
Adobe sconsiglia di modificare l’origine per la generazione di rapporti nel corso di un’attività. Anche se è possibile modificare l’origine per la generazione di rapporti (da Target a A4T o viceversa) durante un’attività che utilizza Target Dovresti sempre avviare una nuova attività. Adobe non garantisce ciò che accade se si modifica l'origine per la generazione di rapporti in un'attività dopo l'esecuzione.
Questo consiglio si applica alle attività Allocazione automatica, Targeting automatico e Automated Personalization che utilizzano Target o Analytics (A4T) come origine per la generazione di rapporti.
Utilizzo di Ripristina dati rapporto opzione per Allocazione automatica attività non è consigliato. Anche se rimuove i dati di reporting visibili, questa opzione non rimuove tutti i record di formazione dal Allocazione automatica modello. Invece di utilizzare Ripristina dati rapporto opzione per Allocazione automatica , crea una nuova attività e disattiva l'attività originale. (Questa guida si applica anche a Targeting automatico e Automated Personalization attività.)
Allocazione automatica crea modelli in base al comportamento di traffico e conversione registrato solo nell’ambiente predefinito. Per impostazione predefinita, Produzione è l’ambiente predefinito, ma è possibile modificarlo in Target Amministrazione > Ambienti.
Se un hit si verifica in un altro ambiente (non predefinito), il traffico viene distribuito in base al comportamento di conversione osservato nell’ambiente predefinito. Il risultato di tale hit (conversione o non conversione) è registrato a scopo di reporting ma non è considerato nella Allocazione automatica modello.
Quando selezioni un altro ambiente, il rapporto mostra il traffico e le conversioni per tale ambiente. L’ambiente selezionato predefinito per un rapporto è l’ambiente predefinito a livello di account selezionato. L’ambiente predefinito non può essere impostato in base alle singole attività.
Ad esempio, l’attività può considerare il mese di dicembre per decidere come allocare il traffico, anziché esaminare i dati dei visitatori di settembre (quando è iniziato il test)?
No, Allocazione automatica considera le prestazioni dell’intera attività.
Allocazione automatica utilizza le decisioni permanenti per gli stessi motivi che Test A/B Le attività sono permanenti. L’allocazione del traffico funziona solo per i nuovi visitatori.
I video seguenti contengono ulteriori informazioni sui concetti descritti in questo articolo.
Questo video include informazioni su come impostare l'allocazione del traffico.
In questo video viene illustrato come creare un test A/A utilizzando il flusso di lavoro guidato in tre passaggi di Target. Allocazione automatica L’argomento di è trattato a partire dal minuto 4:45.