En esta página: Aprenda a configurar la experimentación de rutas con la actividad de optimización para probar diferentes rutas de recorrido mediante experimentos de bandidos A/B o multibrazo, identificar el tratamiento con mejor rendimiento por métrica de éxito y escalar el ganador.
La experimentación le permite probar diferentes rutas en función de una división aleatoria para determinar cuál tiene el mejor rendimiento según las métricas de éxito predefinidas.
Para configurar la experimentación de rutas en un recorrido, siga los pasos a continuación.
Supongamos que desea comparar tres rutas:
- una ruta con un correo electrónico;
- una segunda ruta con un nodo Wait de dos días y un correo electrónico;
- una tercera ruta con un correo electrónico y luego un mensaje SMS.
-
En la sección Orchestration, arrastre y suelte la actividad Optimize en el lienzo de recorrido.
-
Añada una etiqueta opcional que pueda resultar útil para identificar la actividad en los registros de los modos de prueba y creación de informes.
-
Seleccione Experimento de la lista desplegable Método.
-
Haga clic en Crear experimento.
-
Seleccione la métrica de éxito que desee establecer para su experimento. Obtenga más información sobre las métricas disponibles y cómo configurar la lista en esta sección.
-
Seleccione Tipo de experimento para el experimento de ruta:
-
Experimento A/B: defina la división de tráfico entre tratamientos al principio de la prueba. El rendimiento se evalúa en función de la métrica principal que haya elegido; los informes muestran el alza observada entre los tratamientos.
-
Bandido multibrazo — La división del tráfico entre tratamientos se gestiona automáticamente. Cada 7 días, se revisa el rendimiento de la métrica principal y los pesos se ajustan en consecuencia. Los informes siguen mostrando un alza, al igual que en las pruebas A/B.
➡️ Más información acerca de la diferencia entre los experimentos de bandidos A/B y multibrazo
-
-
Puede elegir agregar un grupo Holdout a su entrega. Este grupo no entrará en ninguna ruta desde este experimento.
note NOTE Al activar la barra de alternancia, se llevará automáticamente el 10% de su población. Puede ajustar este porcentaje si es necesario. -
Puede asignar un porcentaje preciso a cada Tratamiento, o simplemente cambiar en la barra de alternancia Distribuir uniformemente.
-
Habilite el experimento de escalado automático para desplegar automáticamente la variación ganadora del experimento. Más información sobre cómo escalar al ganador
-
Haga clic en Crear.
-
Defina los elementos que desee para cada rama resultante del experimento, por ejemplo:
-
Arrastre y suelte una actividad Email en la primera rama (Tratamiento A).
-
Arrastre y suelte una actividad Wait de dos días en la primera rama, seguida de una actividad Email (Tratamiento B).
-
Arrastre y suelte una actividad Email en la tercera rama, seguida de una actividad SMS (Tratamiento C).
-
-
De manera opcional, use Agregar una ruta alternativa en caso de tiempo de espera o error para definir una acción de reserva. Más información
-
Publicar su recorrido.
Una vez que el recorrido está activo, los usuarios se asignan aleatoriamente para seguir diferentes rutas. Journey Optimizer realiza un seguimiento de la ruta de acceso que tiene el mejor rendimiento y proporciona perspectivas procesables.
Siga el éxito del recorrido con el informe Experimento de ruta de Recorrido. Más información
Asignación de ruta en la reentrada del recorrido path-assignment
La asignación de rutas es persistente para un perfil en varias entradas a la misma versión de recorrido. Por ejemplo, si un perfil introduce un recorrido en el día 1 y se asigna a la ruta A y luego vuelve a introducir el recorrido en el día 2, se asigna de nuevo a la ruta A. Esto garantiza una experiencia coherente para el usuario y es necesario para generar informes y análisis estadísticamente válidos.
Sin embargo, las asignaciones solo son persistentes dentro de una versión de recorrido determinada. Una vez publicada una nueva versión del recorrido, la aleatorización cambia y un perfil puede terminar asignándose a una ruta diferente.
Si tiene varias actividades de experimentación de rutas en un recorrido, cada actividad aplica una asignación aleatoria independiente.
Casos de uso de experimentos uc-experiment
Los siguientes ejemplos muestran cómo usar la actividad Optimizar con el método Experimento para determinar qué ruta funciona mejor en general.
Compruebe si el envío del primer mensaje por correo electrónico o por SMS genera conversiones más altas.
➡️ Utilice la tasa de conversión como métrica de éxito (por ejemplo: compras, registros).
Ejecute un experimento para comprobar si enviar un correo electrónico en lugar de tres durante una semana resulta en más compras.
➡️ Use compras o la tasa de cancelación de suscripción como métrica de éxito.
Compare una espera de 24 horas con una espera de 72 horas antes de un seguimiento para determinar qué tiempo maximiza la participación.
➡️: utilice la tasa de pulsaciones o los ingresos como métrica de éxito.
Escalar el ganador scale-winner
Escalar el ganador permite desplegar automática o manualmente la variación ganadora de un experimento para todo el público. Esta función garantiza que, una vez que se determina un ganador, puede amplificar su alcance y efectividad sin monitorizar constantemente el experimento.
Puede elegir entre dos modos:
-
Escalado automático: configure las opciones de escalado automático al crear su experimento eligiendo el momento y las condiciones para escalar el tratamiento ganador o una opción de reserva si no aparece ningún ganador.
-
Escalado manual: revise manualmente los resultados del experimento e inicie el despliegue del tratamiento ganador, manteniendo un control total sobre el tiempo y las decisiones.
Escalado automático autoscaling
El escalado automático permite establecer reglas predefinidas sobre cuándo implementar el tratamiento ganador o una alternativa, en función de los resultados del experimento.
Tenga en cuenta que una vez que se ha producido el escalado automático, el escalado manual ya no está disponible.
Para habilitar el escalado automático en los experimentos:
-
Configure el recorrido y el experimento según sea necesario. Más información
-
Active la opción de escalado automático al configurar el experimento.
-
Seleccione cuándo se debe escalar el ganador:
- En cuanto se encuentre el ganador.
- Después de que el experimento esté activo durante el tiempo seleccionado.
La hora de escalado automático debe programarse antes de la fecha de finalización del experimento. Si se establece para una hora posterior a la fecha de finalización, aparecerá una advertencia de validación y el recorrido no se publicará.
-
Elija el comportamiento de reserva si no se encuentra ningún ganador por tiempo de escala:
- Continuar el experimento hasta que termine según lo programado.
- Escalar el tratamiento alternativo después de un tiempo especificado.
Una vez cumplidos todos los parámetros, el tratamiento ganador o alternativo se envía a su audiencia.
Escalado manual manual-scaling
La escala manual le permite revisar los resultados de los experimentos y decidir cuándo implementar el tratamiento ganador según su propia programación.
Tenga en cuenta que si escala manualmente al ganador antes de la hora programada de escalado automático, se cancela la escala automática.
Para escalar manualmente el ganador de los experimentos:
-
Configure el recorrido y el experimento según sea necesario. Más información
-
Deje que el experimento se ejecute hasta que se identifique un ganador o se alcance la relevancia estadística.
-
Abra el recorrido y seleccione la actividad Optimizar que contiene el experimento de ruta.
Revise los resultados en la vista Experimento de ruta para identificar el tratamiento de mayor rendimiento.
-
Haga clic en Escalar tratamiento para insertar el tratamiento ganador al resto de la audiencia.
-
Seleccione el tratamiento que desee escalar en el menú desplegable y haga clic en Escalar.
Tenga en cuenta que escalar el tratamiento puede tomar hasta una hora. Recibirá una notificación una vez que finalice el proceso de escalado manual.
Esta sección contiene conocimientos estructurados destinados a apoyar la interpretación, la recuperación y la respuesta a preguntas relacionadas con este tema.
Para una comprensión completa, esta información debe combinarse con la documentación de esta página. Ninguna de las fuentes pretende ser independiente; la página describe la función, mientras que esta sección proporciona contexto adicional que ayuda a desambiguar la terminología, la intención, la aplicabilidad y las restricciones.
- TL;DR: En esta página se explica cómo configurar y ejecutar la experimentación de rutas en recorridos Adobe Journey Optimizer mediante métodos de bandido A/B o multibrazo, y cómo escalar el tratamiento ganador de forma automática o manual.
Intenciones:
- Configuración de un experimento de ruta de bandido A/B o multibrazo en un recorrido
- Defina métricas de éxito para evaluar el rendimiento del experimento
- Asignar tráfico entre rutas de tratamiento de forma uniforme o por porcentaje personalizado
- Añada un grupo de exclusión para excluir una parte de la audiencia de todos los tratamientos
- Habilitar el escalado automático para desplegar automáticamente el tratamiento ganador
- Escalar manualmente el tratamiento ganador después de revisar los resultados del experimento
Glosario:
- Optimizar actividad: una actividad de lienzo de recorrido usada para dividir perfiles en diferentes rutas para experimentación o segmentación (específica del producto)
- Tratamiento: Una variante de ruta única en un experimento de ruta (por ejemplo, Tratamiento A, Tratamiento B) (específico del producto)
- Métrica de éxito: KPI utilizado para evaluar qué tratamiento funciona mejor en un experimento (específico del producto)
- Bandido multibrazo: Tipo de experimento en el que la división del tráfico se ajusta automáticamente cada 7 días según el rendimiento de la métrica principal (específico del producto)
- Escalar al ganador: característica que despliega el tratamiento ganador para toda la audiencia restante, ya sea de forma automática o manual (específico del producto)
- Grupo de exclusión: un segmento de la audiencia excluido de todos los tratamientos del experimento, utilizado como grupo de control (específico del producto)
Protecciones:
- Escalar el ganador solo está disponible para recorridos unitarios (activados por eventos y Calificación de audiencias); no está disponible para Leer recorridos de audiencias.
- La hora de escalado automático debe programarse antes de la fecha de finalización del experimento o el recorrido no se publicará.
- Una vez que se ha producido el escalado automático, el escalado manual ya no está disponible.
- Escalado manual del ganador antes de que el tiempo programado de escalado automático cancele el escalado automático.
- La ampliación del tratamiento puede tardar hasta una hora.
Terminología:
- Nombre canónico: Experimentación de rutas — Acrónimo: none — variantes: experimentación de recorridos, prueba de ruta A/B
- Sinónimos: “Optimizar actividad” = “actividad del experimento” = “actividad de división de ruta”
- No confunda: “Experimento A/B” ≠ “Multi-armed bandit” (A/B tiene una división de tráfico fija; Multi-armed bandit ajusta las ponderaciones de forma dinámica cada 7 días)
PREGUNTAS MÁS FRECUENTES:
- Q: ¿Cuál es la diferencia entre el experimento A/B y Multi-armed bandit? — El experimento A/B utiliza una división de tráfico fija definida al principio, mientras que Multi-armed bandit ajusta automáticamente las ponderaciones de tráfico cada 7 días en función del rendimiento de la métrica principal.
- Q: ¿Puedo usar Escalar el ganador en un recorrido de lectura de audiencias? — No; Escalar el ganador solo está disponible para recorridos unitarios (activados por evento y Calificación de audiencias).
- Q: ¿Qué sucede si no se encuentra ningún ganador en el tiempo de escalado automático? — Se puede configurar una alternativa: continuar el experimento hasta su finalización programada o escalar un tratamiento alternativo después de un tiempo especificado.
- Q: ¿Cómo se distribuye el tráfico si no configuro los porcentajes de tratamiento manualmente? — Puede activar el botón de alternancia Distribuir uniformemente para dividir el tráfico de forma equitativa entre todos los tratamientos.
- Q: ¿Puedo editar un experimento de ruta de acceso después de publicar el recorrido? — El recorrido entra en modo de solo lectura después de la publicación; para realizar cambios, cree una nueva versión del recorrido.