Ein Automatische Zuordnung Aktivität in Adobe Target identifiziert einen Gewinner unter zwei oder mehr Erlebnissen und ordnet dem Gewinner automatisch mehr Traffic zu, um Konversionen zu erhöhen, während der Test weiter ausgeführt und das Lernen fortgesetzt wird.
Bei der Erstellung einer A/B-Aktivität mit einem geleiteten Arbeitsablauf mit drei Schritten können Sie die Automatisch dem besten Erlebnis zuweisen -Option.
Mit A/B-Standardtests sind Kosten verbunden. Sie müssen Traffic generieren, um die Leistung jedes einzelnen Erlebnisses zu messen und durch Analysen die erfolgreichsten Erlebnisse zu ermitteln. Die Verteilung von Traffic bleibt auch dann festgelegt, wenn Sie erkennen, dass einige Erlebnisse andere übertreffen. Außerdem ist es schwierig, die Stichprobengröße korrekt zu bestimmen, und die Aktivität muss komplett durchlaufen, bevor Sie einen Sieger finden. Und es besteht immer noch die Möglichkeit, dass der identifizierte Gewinner kein wahrer Gewinner ist.
Die Funktion „Automatisierte Zuordnung“ senkt diese Kosten sowie die Kosten für die Bestimmung eines erfolgreichsten Erlebnisses. Die Funktion „Automatisierte Zuordnung“ überwacht die Zielmetrikleistung aller Erlebnisse und sendet proportional mehr neue Teilnehmer an Erlebnisse mit einer hohen Leistung. Es wird ausreichend Traffic für die Erkundung der anderen Erlebnisse reserviert. Sie können die Vorteile des Tests an Ihren Ergebnissen erkennen, selbst wenn die Aktivität gerade ausgeführt wird: Die Optimierung erfolgt parallel zum Lernen.
Die Funktion „Automatisierte Zuordnung“ überführt Besucher nach und nach zu den erfolgreichsten Erlebnissen, anstatt dass Sie mit dem Bestimmen eines Siegers warten müssen, bis die Aktivität abgeschlossen ist. Sie profitieren schneller von Steigerungen, da den Aktivitätsteilnehmern, die zu weniger erfolgreichen Erlebnissen geleitet worden wären, nun potenziell erfolgreiche Erlebnisse angezeigt werden.
Ein normaler A/B-Test in Target zeigt nur paarweise Vergleiche von Herausforderern mit Kontrollelementen. Wenn beispielsweise eine Aktivität über Erlebnisse verfügt: A, B, C und D, wobei A die Kontrolle, ein normales Target A/B-Tests würden A mit B, A mit C und A mit D vergleichen.
Bei solchen Tests umfassen die meisten Produkte, einschließlich Target, verwenden Sie eine Welch’s t-Test um eine P-Wert-basierte Konfidenz zu erzeugen. Mithilfe dieses Konfidenzwerts wird dann ermittelt, ob sich der Herausforderer ausreichend vom Kontrollelement unterscheidet. Allerdings Target führt nicht automatisch die impliziten Vergleiche (B mit C, B mit D und C mit D) durch, die erforderlich sind, um das "beste"Erlebnis zu finden. Aus diesem Grund müssen Marketingexperten die Ergebnisse manuell analysieren, um das Gewinnererlebnis zu ermitteln.
Die automatisierte Zuordnung führt alle impliziten Vergleiche über alle Erlebnisse hinweg durch und ergibt dann einen „wahren“ Gewinner. Es gibt in diesem Test keinen Bedarf für ein „Kontrollerlebnis“.
Automatische Zuordnung Weist neue Besucher auf intelligente Weise Erlebnissen zu, bis sich das Konfidenzintervall des besten Erlebnisses nicht mit dem Konfidenzintervall anderer Erlebnisse überschneidet. Normalerweise könnte dieser Prozess zu falsch-positiven Ergebnissen führen, aber Automatische Zuordnung verwendet Konfidenzintervalle basierend auf der Bernstein-Ungleichheit die wiederholte Evaluierungen ausgleicht. An diesem Punkt gibt es einen echten Gewinner. Wann Automatische Zuordnung stoppt, sofern keine wesentliche Zeitabhängigkeit gegenüber den Besuchern besteht, die auf die Seite gelangen, besteht eine Wahrscheinlichkeit von mindestens 95 %, dass Automatische Zuordnung gibt ein Erlebnis zurück, dessen wahre Antwort nicht schlechter als 1 % (relativ) kleiner als die wahre Antwort des erfolgreichsten Erlebnisses ist.
Die folgenden Begriffe sind nützlich, wenn Sie Automatische Zuordnung:
Multi-Armed Bandit: Eine Multi-Armed Bandit-Vorgehensweise („Mehrarmiger Bandit“) zur Optimierung gleicht forschendes Lernen und die Verwertung dieses Lernens aus.
Die Gesamtlogik dahinter Automatische Zuordnung umfasst sowohl die gemessene Leistung (z. B. Konversionsrate) als auch die Konfidenzintervalle der kumulativen Daten. Im Gegensatz zu A/B-Standardtests, bei denen der Traffic gleichmäßig zwischen Erlebnissen aufgeteilt wird, Automatische Zuordnung ändert die Traffic-Zuordnung über Erlebnisse hinweg.
Die Multi-Armed Bandit-Methode hält einige Erlebnisse für die Erforschung frei, während die leistungsstarken Erlebnisse ausgewertet werden. Es werden mehr neue Besucher in leistungsstärkere Erlebnisse platziert, und gleichzeitig wird die Reaktionsfähigkeit auf sich ändernde Bedingungen beibehalten. Diese Modelle werden mindestens einmal pro Stunde aktualisiert, um sicherzustellen, dass das Modell auf die neuesten Daten reagiert.
Sobald mehr Besucher an der Aktivität teilnehmen, erweisen sich einige Erlebnisse als erfolgreicher und erhalten mehr Traffic. 20 Prozent des Datenverkehrs werden weiterhin per Zufall verteilt, um alle Erlebnisse zu erforschen. Wenn ein Erlebnis mit einer schlechteren Leistung anfängt, sich zu verbessern, erhält es mehr Traffic. Oder: Wenn eine erfolgreiche Aktivität nachlässt, wird diesem Erlebnis weniger Traffic zugeordnet. Zum Beispiel wenn ein Ereignis dazu führt, dass Besucher nach anderen Informationen auf Ihrer Medienwebsite suchen oder wenn Wochenendverkäufe auf Ihrer Retail-Website unterschiedliche Ergebnisse liefern.
Die folgende Abbildung zeigt, wie der Algorithmus während eines Tests mit vier Erlebnissen möglicherweise funktioniert:
Die Abbildung zeigt, wie sich der den einzelnen Erlebnissen zugeordnete Traffic ändert, während die Aktivität mehrere Runden durchläuft, bis ein Gewinner gefunden ist.
Rund | Beschreibung |
---|---|
![]() |
Aufwärmrunde (0): Während der Aufwärmrunde wird für jedes Erlebnis gleich viel Traffic zugeteilt, bis jedes Erlebnis in der Aktivität mindestens 1.000 Besucher und 50 Konversionen aufweist.
Nur zwei Erlebnisse gelangen in die nächste Runde: D und C. Zukünftig werden 80 % des Traffics gleichmäßig auf die beiden Erlebnisse verteilt. Die anderen beiden Erlebnisse nehmen weiterhin teil, werden jedoch nur als Teil der zufälligen Traffic-Zuordnung von 20 % bereitgestellt, wenn neue Besucher an der Aktivität teilnehmen. Sämtliche Zuordnungen werden stündlich aktualisiert (erkennbar an der Rundenangabe auf der X-Achse in der Abbildung oben). Nach jeder Runde werden die kumulativen Daten verglichen. |
![]() |
Runde 1: Während dieser Runde werden 80% des Traffics den Erlebnissen C und D zugeordnet (jeweils 40%). 20 % des Traffics werden auf zufälliger Basis den Erlebnissen A, B, C und D zugeordnet (jeweils 5 %). Während dieser Runde werden beim Erlebnis A gute Leistungen verzeichnet.
|
![]() |
Runde 2: Während dieser Runde werden 80% des Traffics den Erlebnissen A und D zugeordnet (jeweils 40%). 20 % des Traffics werden auf zufälliger Basis zugeordnet, das heißt A, B, C und D erhalten jeweils 5 % des Traffics. Während dieser Runde werden beim Erlebnis B gute Leistungen verzeichnet.
|
![]() |
Runde 3: Während dieser Runde werden 80% des Traffics den Erlebnissen B und D zugeordnet (jeweils 40%). 20 % des Traffics werden auf zufälliger Basis zugeordnet, das heißt A, B, C und D erhalten jeweils 5 % des Traffics. Während dieser Runde werden beim Erlebnis D weiterhin gute Leistungen verzeichnet und auch das Erlebnis C läuft gut.
|
![]() |
Runde 4: Während dieser Runde werden 80% des Traffics den Erlebnissen C und D zugeordnet (jeweils 40%). 20 % des Traffics werden auf zufälliger Basis zugeordnet, das heißt A, B, C und D erhalten jeweils 5 % des Traffics. Während dieser Runde werden beim Erlebnis C gute Leistungen verzeichnet.
|
![]() |
Runde n: Im weiteren Verlauf der Aktivität zeigt sich, dass ein Erlebnis die besten Leistungen erreicht. Dieser Prozess geht so lange weiter, bis ein „siegreiches“ Erlebnis ermittelt ist. Wenn sich das Konfidenzintervall des Erlebnisses mit der höchsten Konversionsrate nicht mit dem Konfidenzintervall anderer Erlebnisse überschneidet, wird es als Gewinner bezeichnet. A wird auf der Seite der Gewinneraktivität angezeigt und im Aktivität Liste.
Wichtig: Wenn Sie während des Prozesses vorzeitig einen Gewinner manuell auswählen, riskieren Sie, das falsche Erlebnis auszuwählen. Daher empfiehlt es sich unbedingt, so lange zu warten, bis der Algorithmus das „siegreiche“ Erlebnis ermittelt hat. |
Wenn eine Aktivität nur über zwei Erlebnisse verfügt, erhalten beide Erlebnisse gleichen Traffic, bis Target findet ein erfolgreiches Erlebnis mit 75 % Konfidenz. An diesem Punkt werden zwei Drittel des Traffics an den Gewinner und ein Drittel an den Verlierer weitergeleitet. Danach werden, wenn ein Erlebnis 95 % der Konfidenz erreicht, 90 % des Traffics dem Gewinner zugeordnet und 10 % werden dem Verlierer zugeordnet. Target behält immer einen Teil des Traffics bei, der an das "verlierende"Erlebnis gesendet wird, um zu verhindern, dass am Ende falsch-positive Ergebnisse auftreten (d. h., einige Erkundungen beizubehalten).
Nach Automatische Zuordnung -Aktivität aktiviert ist, sind die folgenden Vorgänge über die Benutzeroberfläche nicht zulässig:
Weitere Informationen finden Sie unter Die automatisierte Zuordnung ermöglicht schnellere Testergebnisse und einen höheren Umsatz als ein manueller Test.
Die Automatische Zuordnung -Funktion kann nur mit einer erweiterten Metrikeinstellung verwendet werden: Anzahl erhöhen und Benutzer in Aktivität belassen
Die folgenden erweiterten Metrikeinstellungen werden nicht unterstützt: Anzahl erhöhen, Versionsbenutzer, Wiedereintritt erlauben und Anzahl erhöhenund Benutzer freigeben und Wiedereintritt sperren.
Häufig wiederkehrende Besucher können die Konversionsraten von Erlebnissen erhöhen.
Wenn ein Besucher, der Erlebnis A anzeigt, häufig zurückkehrt und mehrere Male konvertiert, wird die Konversionsrate (CR) von Erlebnis A künstlich erhöht. Vergleichen Sie dieses Ergebnis mit Erlebnis B, bei dem Besucher konvertieren, aber nicht häufig zurückkehren. Daher sieht das CR von Erlebnis A besser aus als das CR von Erlebnis B, sodass neue Besucher eher A als B zugeordnet werden. Wenn Sie sich dafür entscheiden, einmal pro Teilnehmer zu zählen, sind die CR von A und CR von B möglicherweise identisch.
Wenn wiederkehrende Besucher zufällig verteilt werden, wird ihre Wirkung auf die Konversionsrate wahrscheinlich eher ausgeglichen. Um diese Auswirkung zu beschränken, sollten Sie die Änderung der Zählmethode der Zielmetrik erwägen, um jeden Teilnehmer nur einmal zu zählen.
Differenziert zwischen High Performern, nicht zwischen Low Performern.
Die automatisierte Zuordnung kann gut zwischen leistungsstarken Erlebnissen unterscheiden (und einen Sieger ermitteln). Es kann vorkommen, dass Sie nicht genug zwischen den leistungsschwachen Erlebnissen unterscheiden können.
Wenn Sie eine statistisch signifikante Differenzierung zwischen allen Erlebnissen erstellen möchten, sollten Sie möglicherweise den manuellen Traffic-Zuordnungsmodus in Erwägung ziehen.
Zeitkorrelierte (oder je nach Kontext variierende) Konversionsraten beeinflussen die Zuordnungsmengen.
Einige Faktoren, die während eines A/B-Standardtests ignoriert werden können, da sie sich auf alle Erlebnisse gleichermaßen auswirken, können bei einer Automatische Zuordnung Test. Der Algorithmus ist gegenüber den beobachteten Konversionsraten empfindlich. Nachfolgend finden Sie Beispiele für Faktoren, die sich ungleichmäßig auf die Erlebnisleistung auswirken können:
Erlebnisse mit variierender kontextueller Relevanz (Zeit, Ort, Geschlecht usw.).
Beispiel:
Die Verwendung von Erlebnissen mit unterschiedlicher kontextueller Relevanz kann die Ergebnisse in einer Automatische Zuordnung mehr als in einem A/B-Test testen, da der A/B-Test die Ergebnisse über einen längeren Zeitraum analysiert.
Erlebnisse mit variierenden Verzögerungen in der Konversion, möglicherweise aufgrund der Dringlichkeit der Nachricht.
Zum Beispiel signalisiert „30 Prozent Rabatt nur noch heute“ dem Besucher, noch heute zu konvertieren, während „50 Prozent Rabatt auf Ihren ersten Einkauf“ nicht denselben Handlungsdruck auslöst.
Lesen Sie die folgenden häufig gestellten Fragen und Antworten, während Sie mit Automatische Zuordnung Aktivitäten:
Ja. Weitere Informationen finden Sie unter A4T-Unterstützung für automatische Zuordnungs- und automatische Targeting-Aktivitäten.
Nein. Nur neue Besucher werden automatisch zugeordnet. Wiederkehrende Besucher sehen weiterhin ihr ursprüngliches Erlebnis, um die Gültigkeit des A/B-Tests zu schützen.
Der Algorithmus garantiert eine Konfidenz von 95 % oder eine Falsch-positiv-Rate von 5 %, wenn Sie warten, bis ein Gewinnerabzeichen angezeigt wird.
Der Algorithmus setzt ein, nachdem sämtliche Erlebnisse in der Aktivität mindestens 1.000 Besucher und 50 Konversionen erreicht haben.
80 % des Traffics werden über Automatische Zuordnung und 20 % des Traffics werden zufällig bereitgestellt. Wenn ein Gewinner ermittelt ist, erhält dieser die gesamten 80 %, während alle Erlebnisse, einschließlich des Gewinners, ihren jeweiligen Anteil an den 20 % des Traffics erhalten.
Ja. Die Multi-Armed Bandit-Methode stellt sicher, dass mindestens 20 % des Datenverkehrs für die Erforschung von Änderungsmustern oder Konversionsraten in allen Erlebnissen reserviert werden.
Solange alle optimierten Erlebnisse ähnliche Verzögerungen aufweisen, ist das Verhalten dasselbe wie bei einer Aktivität mit schnellerem Konversionszyklus. Es dauert jedoch länger, den Schwellenwert für 50 Konversionen zu erreichen, bevor der Traffic-Zuordnungsprozess beginnt.
Bei der automatisierten Personalisierung werden die Profilattribute aller Besucher verwendet, um das beste Erlebnis zu bestimmen. Dadurch wird die Aktivität für den jeweiligen Besucher nicht nur optimiert, sondern auch personalisiert.
Automatische Zuordnungist dagegen ein A/B-Test, der einen aggregierten Gewinner ergibt (das beliebteste Erlebnis, aber nicht notwendigerweise das effektivste Erlebnis für jeden Besucher).
Derzeit bevorzugt die Logik Besucher, die schnell konvertieren oder häufiger besuchen, da diese Besucher die Gesamtkonversionsrate des Erlebnisses, zu dem sie gehören, vorübergehend erhöhen. Der Algorithmus passt sich häufig von selbst an, sodass die Steigerung der Konversionsrate bei jeder Momentaufnahme verstärkt wird. Wenn die Site zahlreiche wiederkehrende Besucher erhält, können ihre Konversionen die Gesamtkonversionsrate für das Erlebnis, zu dem sie gehören, potenziell erhöhen. Es bestehen gute Chancen, dass wiederkehrende Besucher per Zufall verteilt werden; in diesem Fall wird die Gesamtwirkung (Anstieg) ausgeglichen. Um diese Auswirkung zu beschränken, sollten Sie die Änderung der Zählmethode der Erfolgsmetrik erwägen, um jeden Teilnehmer nur einmal zu zählen.
Sie können die vorhandenen Adobe Target Stichprobengrößenrechner um eine Schätzung der Laufzeit des Tests zu erhalten. (Wie bei herkömmlichen A/B-Tests wenden Sie die Bonferroni-Korrektur an, wenn Sie mehr als zwei Angebote oder mehr als eine Konversionsmetrik/Hypothese testen.) Dieser Rechner ist für herkömmliche A/B-Tests mit festem Horizont konzipiert und liefert nur eine Schätzung. Verwenden des Taschenrechners für eine Automatische Zuordnung -Aktivität ist optional, da Automatische Zuordnung erklärt einen Gewinner für Sie. Sie müssen keinen festen Zeitpunkt auswählen, um die Testergebnisse anzuzeigen. Die bereitgestellten Werte sind immer statistisch gültig.
In unseren Experimenten haben wir Folgendes gefunden:
Es gibt wirklich keinen Grund, ein leistungsschwaches Erlebnis zu entfernen. Automatische Zuordnung liefert automatisch öfter leistungsstarke Erlebnisse und liefert weniger häufig leistungsschwache Erlebnisse. Wenn Sie ein leistungsschwaches Erlebnis in der Aktivität lassen, wirkt sich dies nicht wesentlich auf die Geschwindigkeit aus, mit der ein Gewinner ermittelt wird.
20 % der Besucher werden zufällig über alle Erlebnisse verteilt. Der Traffic, der für ein leistungsschwaches Erlebnis bereitgestellt wird, ist minimal (20 % geteilt durch die Anzahl der Erlebnisse).
Adobe empfiehlt nicht, die Zielmetrik in der Mitte einer Aktivität zu ändern. Auch wenn es möglich ist, die Zielmetrik während einer Aktivität in der Benutzeroberfläche von Target zu ändern, sollten Sie dies nicht tun, sondern stattdessen eine neue Aktivität starten. Adobe garantiert nicht, was passiert, wenn Sie die Zielmetrik in einer Aktivität ändern, nachdem sie ausgeführt wird.
Diese Empfehlung gilt gleichermaßen für automatische Zuordnungs-, automatische Targeting- und Automated Personalization-Aktivitäten, die Target oder Analytics (A4T) als Berichtsquelle verwenden.
Adobe empfiehlt nicht, die Berichtsquelle in der Mitte einer Aktivität zu ändern. Es ist zwar möglich, die Berichtsquelle zu ändern (aus Target zu A4T oder umgekehrt) während einer Aktivität, bei der die Target -Benutzeroberfläche sollten Sie immer eine neue Aktivität starten. Adobe garantiert nicht, was passiert, wenn Sie die Berichtsquelle in einer Aktivität ändern, nachdem sie ausgeführt wird.
Diese Empfehlung gilt gleichermaßen für automatische Zuordnungs-, automatische Targeting- und Automated Personalization-Aktivitäten, die Target oder Analytics (A4T) als Berichtsquelle verwenden.
Verwenden der Berichtsdaten zurücksetzen -Option für Automatische Zuordnung -Aktivitäten nicht vorgeschlagen werden. Obwohl die sichtbaren Berichtsdaten entfernt werden, entfernt diese Option nicht alle Trainings-Datensätze aus der Automatische Zuordnung -Modell. Statt die Berichtsdaten zurücksetzen -Option für Automatische Zuordnung Aktivitäten erstellen, eine neue Aktivität erstellen und die ursprüngliche Aktivität deaktivieren. (Diese Leitlinien gelten auch für Automatisches Targeting und Automated Personalization Aktivitäten.)
Automatische Zuordnung erstellt Modelle basierend auf dem Traffic- und Konversionsverhalten, das nur in der Standardumgebung aufgezeichnet wird. Standardmäßig Produktion ist die Standardumgebung, die Standardumgebung kann jedoch in Target Administration > Umgebungen.
Tritt ein Treffer in einer anderen (nicht standardmäßigen) Umgebung auf, wird der Traffic entsprechend dem beobachteten Konversionsverhalten in der Standardumgebung verteilt. Das Ergebnis dieses Treffers (Konversion oder Nicht-Konversion) wird zu Berichtszwecken aufgezeichnet, jedoch nicht in der Variablen Automatische Zuordnung -Modell.
Bei Auswahl einer anderen Umgebung zeigt der Bericht Traffic und Konversionen für diese Umgebung an. Die für einen Bericht standardmäßig ausgewählte Umgebung ist die für das gesamte Konto ausgewählte Standardeinstellung. Die Standardumgebung kann nicht pro Aktivität festgelegt werden.
Kann die Aktivität beispielsweise den Monat Dezember berücksichtigen, um zu entscheiden, wie Traffic zugeordnet werden soll, anstatt sich die September-Besucherdaten anzusehen (wann der Test begonnen hat)?
Nein, Automatische Zuordnung berücksichtigt die Leistung der gesamten Aktivität.
Automatische Zuordnung verwendet fixierbare Entscheidungen aus denselben Gründen, aus denen A/B-Test -Aktivitäten sind fixierbar. Die Traffic-Zuordnung funktioniert nur für neue Besucher.
In den folgenden Videos erhalten Sie weitere Informationen zu den in diesem Artikel behandelten Konzepten.
In diesem Video sind Informationen zur Einrichtung der Traffic-Zuordnung enthalten.
In diesem Video wird gezeigt, wie mithilfe des geleiteten Target-Arbeitsablaufs mit drei Schritten ein A/B-Test erstellt wird. Automatische Zuordnung wird ab 4:45 besprochen.