在此页面上:了解如何使用优化活动设置路径实验,以使用A/B或多臂赌博机实验测试不同的历程路径,按成功量度确定表现最佳的处理并缩放入选者。
通过试验可以基于随机拆分测试不同的路径,以根据预定义的成功量度确定哪个路径的表现最佳。
要在历程中设置路径试验,请执行以下步骤。
假设您要比较三个路径:
- 一条路径,一封电子邮件;
- Wait节点为两天且包含电子邮件的第二个路径;
- 第三个路径,其中包含电子邮件,然后是短信消息。
-
从 业务流程 部分中,将 优化 活动拖放到历程画布中。
-
添加可选标签,这对于在报告和测试模式日志中标识活动很有用。
-
从 方法 下拉列表中选择试验。
{width="65%"}
-
单击创建试验。
-
选择要为试验设置的成功量度。 在本节中了解关于可用量度和如何配置列表的详细信息。
{width="80%"}
-
为您的路径试验选择试验类型:
-
A/B试验 — 在测试开始时定义处理之间的流量分配。 根据您选择的主要指标评估性能;报表显示观察到的两次处理之间的提升。
-
多臂老虎机 — 自动处理处理之间的流量分摊。 主要指标的表现每7天检讨一次,其权重亦作出相应调整。 报表会继续显示提升,就像A/B测试一样。
{width="80%"}
-
-
您可以选择向投放添加 维持 组。 该组不会从此试验输入任何路径。
note NOTE 打开切换栏将自动获取您群体的10%。 您可以根据需要调整此百分比。 -
您可以为每个 待遇 分配精确百分比,或者只需打开 平均分配 切换栏。
{width="80%"}
-
启用自动缩放试验以自动转出试验的入选变量。 了解有关如何扩展入选者的更多信息
-
单击创建。
-
为从试验生成的每个分支定义所需的元素,例如:
{width="100%"}
-
或者,在超时或错误的情况下使用 添加替代路径 来定义回退操作。 了解详情
-
发布您的历程。
历程开始后,将随机分配用户以沿着不同路径依次访问。 Journey Optimizer跟踪哪个路径效果最佳并提供可操作分析。
使用历程路径试验报告跟踪您的旅程是否成功。 了解详情
历程重新进入时的路径分配 path-assignment
同一历程版本中的多个入口中的配置文件会持续分配路径。 例如,如果用户档案在第1天进入旅程,并被分配给路径A,然后在第2天再次进入旅程,则它将被再次分配给路径A。这确保用户获得一致的体验,并且在统计上有效的报告和分析中是必需的。
但是,这些分配仅在给定历程版本中持续存在。 发布新历程版本后,随机性会发生更改,并且用户档案最终可能会分配到其他路径。
如果旅程中有多个路径试验活动,则每个活动会应用独立的随机分配。
试验用例 uc-experiment
以下示例显示如何将 Optimize 活动与 Experiment 方法结合使用,以确定哪条路径总体效果最佳。
测试通过电子邮件发送第一条消息还是通过短信发送第一条消息是否会提高转化率。
➡️使用转化率作为成功量度(例如:购买、注册)。
运行试验以检查在一周内发送一封电子邮件还是发送三封电子邮件是否会导致更多购买。
➡️使用购买或取消订阅率作为成功量度。
比较24小时等待与跟进前72小时的等待,以确定哪个时间可最大化参与。
➡️使用点进率或收入作为成功量度。
缩放入选者 scale-winner
通过扩展入选者的范围,您可以自动或手动将试验的入选范围扩展到全体受众。 此功能确保确定入选者后,您无需持续监控试验即可扩大其影响范围和增强其有效性。
您可以在两种模式之间进行选择:
-
自动缩放:在创建试验时,通过选择缩放入选处理的时间和条件来配置自动缩放设置,如果没有入选者,则配置回退选项。
-
手动缩放:手动查看实验结果并启动入选处理的推出,同时保持对时间和决策的完全控制。
自动缩放 autoscaling
自动缩放允许您根据实验结果,为何时推出入选处理或回退设置预定义的规则。
请注意,一旦发生自动缩放,手动缩放将不再可用。
要在实验中启用自动缩放,请执行以下操作:
-
设置历程并根据需要配置试验。 了解详情
-
在设置试验时启用自动缩放选项。
路径试验中的
-
选择应何时缩放入选者:
- 一旦找到赢家。
- 试验在选定的时间内处于活动状态。
自动缩放时间必须安排在试验的结束日期之前。 如果将其设置为结束日期之后的时间,则会显示验证警告,并且不会发布历程。
-
如果按时间范围未找到入选者,请选择回退行为:
- 继续试验,直到按计划结束。
- 在指定时间后缩放替代治疗。
满足所有参数后,您的入选或替代处理方式将发送给受众。
手动缩放 manual-scaling
通过手动缩放,您能够查看实验结果,并决定何时按照自己的计划推出入选处理。
请注意,如果您在计划的自动缩放时间之前手动缩放入选者,则会取消自动缩放。
手动缩放试验的入选者:
-
设置历程并根据需要配置试验。 了解详情
-
让试验一直运行,直到确定入选者或实现统计学意义为止。
-
打开您的历程,然后选择包含路径试验的 优化 活动。
查看 路径试验 视图中的结果以确定表现最佳的处理。
-
单击 缩放处理 以将入选处理推送到其他受众。
-
从下拉菜单中选择要缩放的处理,然后单击缩放。
{width="80%"}
请注意,缩放处理可能需要长达一小时的时间。 手动缩放过程完成后,您将收到通知。
本节包含结构化知识,用于支持与本主题相关的解释、检索和问答。
要全面了解相关信息,应将此信息与本页上的文档相结合。 这两个源都不是独立的;页面描述了功能,而本节提供了其他上下文来帮助消除术语、意图、适用性和约束条件的歧义。
- TL;DR:本页介绍如何使用A/B或多臂赌博机方法在Adobe Journey Optimizer历程中配置和运行路径实验,以及如何自动或手动缩放入选处理。
意图:
- 在历程中设置A/B或多臂老虎机路径试验
- 定义成功量度以评估试验性能
- 在处理路径之间平均或按自定义百分比分配流量
- 添加维持组以从所有处理中排除部分受众
- 启用自动缩放以自动转出入选处理
- 查看实验结果后手动缩放入选处理
术语表:
- 优化活动:历程画布活动,用于将用户档案拆分为不同的路径以进行试验或定位(产品特定)
- 处理:路径试验中的单个路径变体(例如,处理A,处理B) (产品特定)
- 成功量度:用于评估哪个处理在试验 (产品特定) 中表现最佳的KPI
- 多臂赌博机:一种实验类型,其中流量拆分每7天根据主要指标性能自动调整一次(产品特定)
- 缩放入选者:自动或手动 (产品特定) 将入选处理转出到其余所有受众的功能
- 保留组:从所有试验处理中排除的受众区段,用作控制组(产品特定)
护栏:
- 缩放入选者仅适用于单一历程(事件触发和受众资格);不适用于读取受众历程。
- 必须计划在试验的结束日期之前安排自动缩放时间,否则历程不会发布。
- 自动缩放完成后,手动缩放不再可用。
- 在计划的自动缩放时间取消自动缩放之前手动缩放入选者。
- 扩大治疗范围最多可能需要一小时。
术语:
- 规范名称:路径试验 — 首字母缩写:none — 变体:历程试验、A/B路径测试
- 同义词:“优化活动”=“实验活动”=“路径拆分活动”
- 请勿混淆:“A/B试验”≠“多臂老虎机”(A/B具有固定流量分摊;多臂老虎机每7天动态调整一次权重)
常见问题解答:
- 问:A/B试验与多臂老虎机之间有何区别? — A/B实验使用开始时定义的固定流量分摊,而Multi-armed Bandit根据主要指标性能每7天自动调整流量权重。
- 问:能否在读取受众历程中使用缩放入选者? — 否;缩放入选者仅适用于单一(事件触发和受众资格)历程。
- 问:如果自动缩放时间未找到入选者,会出现什么情况? — 可以配置备用:继续试验直到其计划结束,或在指定时间后扩展替代疗法。
- 问:如果不手动配置处理百分比,流量如何分配? — 您可以启用“平均分配”切换以将流量平均分配到所有处理。
- 问:历程发布后是否可以编辑路径试验? — 历程在发布后进入只读模式;要进行更改,请创建历程的新版本。