Inviato test A/B mirato bloccato all’invio (risposta)

Descrizione

Ambiente
Campaign Standard

Problema/Sintomi

Quando si inviano test A/B basati sull’oggetto, la dimensione del target viene contrassegnata come un avviso che indica che è troppo piccola (nessuna documentazione menziona le dimensioni minime del target). La variante vincente è stata selezionata manualmente quando le consegne successive non selezionavano un vincitore.


Il saldo iniziale dei clienti è stato inviato, ma le due consegne successive sono ora bloccate in Invio (risposta) status e non invierà, con il 43% dei nostri invii bloccato.

Risoluzione

Soluzione: imposta l'aggregazione su none. Il test A/B non dovrebbe affrontare il problema di cui sopra.

Causa
Il cliente dispone di una consegna ricorrente di test AB da un flusso di lavoro. La popolazione di apprendimento è impostata come 5% per variante e ci sono due varianti con un periodo di apprendimento di 45 minuti. La popolazione del 57% è la popolazione iniziale sulla quale è stato eseguito il test AB; dopo che quel vincitore è stato spinto. Il periodo di aggregazione della consegna è di 24 ore. Ecco perché la popolazione viene ancora aggiunta alla consegna anche dopo aver completato il test AB. Il prodotto ha un limite in quanto la popolazione successiva non viene programmata quando il vincitore è stato spinto. Questo è segnalato come bug CAMP-47125 a bassa priorità.

In questa pagina