Campaign Standard: A/B-Testsendungen stehen noch aus, während der Gewinner ausgewählt wird

In diesem Artikel wird beschrieben, warum A/B-Tests abgeschlossen werden, bevor alle Varianten an Empfängerinnen und Empfänger bereitgestellt werden.

Beschreibung description

Die A/B-Test-Sendungen in einem Workflow wurden so eingerichtet, dass sie fünf Sendungen durchführen und basierend auf ausgewählten Kriterien einen Gewinner auswählen. Die Versandlogs zeigten jedoch den Status „Ausstehend“ an, während die Benutzeroberfläche zeigt, dass ein Gewinner („A„) ausgewählt wurde und die restliche Zielgruppe ihre E-Mails erhalten hat. Diese Diskrepanz gab Anlass zur Sorge, ob alle beabsichtigten Empfänger ihre Nachrichten korrekt erhalten haben.

Lösung resolution

Die Grundursache lag hier in der Tatsache begründet, dass der Workflow abgeschlossen oder gestoppt wurde, bevor der Versand vollständig abgeschlossen war.

Die Nachrichten wurden versendet und die Verarbeitung der Antworten wurde gestartet. Da die Dauer der Versandaktivität jedoch vom Workflow bestimmt wird, wurde die Verarbeitung für alle enthaltenen Sendungen in der Mitte des Prozesses angehalten.

Es ist wichtig, diesen Workflow mit A/B-Test-Sendungen so lange funktionieren zu lassen, bis die Metriken zufriedenstellend sind.

Das liegt an der Art der A/B-Test-Sendungen, da sie mehrere Phasen im Fluss haben.

Der Versand selbst sollte erst gestoppt werden, wenn alle Nachrichten verarbeitet, entweder quittiert, empfangen, geöffnet, zurückgeschickt, angeklickt usw. wurden.

Wenn der Kunde einen Workflow für A/B-Test-Sendungen verwenden muss, lassen Sie dieselben Workflows unbegrenzt ausführen, d. h. Zum Beispiel für eine Woche.

Es empfiehlt sich außerdem, die Sendungen selbst zu staffeln und nicht die stündliche Nachrichtenrate, wenn A/B-Tests durchgeführt werden, oder einen separaten Workflow für jeden dieser Sendungen zu erstellen.