Adobe Target 中的多变量测试 (MVT) 可通过比较页面上各元素中的选件组合,来确定哪个组合对特定受众的效果最佳,以及哪个元素对活动成功的影响最大。
多变量测试可以帮助您发现特定元素与页面上的其他元素相比,对转化的相对影响。它还可以帮助您进一步完善已被证明是有效的元素组合。
与 A/B 测试相比,多变量测试提供的一个优势在于,它能够向您显示页面上哪些元素会对转化产生最大的影响。这也被称为“主效应”。此信息非常有用,例如,它可以帮助您确定想要获得最多关注的内容应该放在哪个位置。
多变量测试还可帮助您发现找页面上两个或多个元素之间的复合效果。例如,与特定横幅或主题图像结合使用时,特定广告可能会产生更多转化。这也被称为“交互效应”。
Target 使用全因子多变量测试来帮助您优化内容。全因子多变量测试以相等的概率测试所有可能的内容组合。例如,如果您有两个页面元素,每个页面元素包含三个选件,则共有九种可能的组合 (3x3)。如果您有三个元素,其中两个包含三个可能的选件,另一个包含两个选件,则共有 18 个选项 (3x3x2)。
在 Target 中,每个组合都是一个体验。多变量测试会比较每个体验,这样您可以了解哪些组合是最成功的。同时,系统会收集和分析数据以了解每个位置和选件对成功量度的影响如何。
由于可能生成大量的组合,因此多变量测试需要的时间和流量多于 A/B 测试。页面必须获得足够的流量才能为每个体验产生具有统计意义的结果。要获得有用的结果,您需要了解页面接收的流量,并在适当的一段时间内测试最佳组合数以获得所需结果。Target 的流量估算器可以帮助您设计适用于您的流量的测试。在使用流量估算器之前,您应已拥有合适的统计数据,该数据可显示您的网站通常会收到的展示次数和转化次数。思考一下您每天的流量级别。活动中的体验越多,活动需要包含的流量就越多,或者活动需要运行的时间就越长。如果您获得的流量不多,则应减少测试的组合数量;否则,产生有意义的测试结果所需的时间可能会过长而导致结果无用。
设置多变量测试时,了解一些基本术语会有帮助。
行业内对术语的用法各有不同。本节定义了 Target 使用的术语。
组合:在多个位置测试多个内容选项时创建的内容变体。例如,如果您正在对 3 个位置进行测试,每个位置有 3 个内容选项,则一共有 27 种组合 (3x3x3)。来到您网站的访客将看到其中一种组合,也称之为一个体验。
内容:构成某个位置当中测试变体的文本或图像。多变量测试会对多个位置中的多个内容选项进行比较。在 MVT 方法中,有时将内容称为“级”**。
元素:包含要在 MVT 中测试的内容变体的 DOM 元素。另请查看“位置”**。
位置:页面上的特定内容区域,通常包含在单个 DOM 元素内。在 MVT 方法中,有时将内容称为“因子”**。全因子多变量测试会比较您的位置中所有可能的选件组合。
多变量测试可与 A/B 测试结合使用以优化您的页面。您可以将它们结合使用的示例包括:
使用 A/B 测试来优化页面布局,然后进行 MVT 测试以确定页面上每个元素的最佳内容。。
A/B 测试可以提供关于布局的重要反馈,而 MVT 测试则擅长测试页面设计中元素的内容。在测试多个内容选项之前对布局运行 A/B 测试可以帮助您确定最佳布局和最具影响力的内容。
使用 MVT 测试来确定最重要的元素,然后对该元素进行更集中的 A/B 测试。
如果不同体验的数量超过5个,并且这些体验包含两个或更多元素,则最好在运行A/B测试之前先运行MVT测试。 MVT 测试可显示页面中的哪些区域最有可能提高转化。这些是营销人员应关注的元素。例如,MVT 测试可能表明,行为召唤 (call to action) 是实现目标的最重要元素。确定哪些元素和内容对帮助您实现目标最有用后,您可以运行A/B测试以进一步优化结果,例如测试两个特定图像,或比较行动动员的措辞或颜色。 通过在 MVT 测试后使用一个或多个 A/B 测试,您可以确定达成所需结果的最佳内容。
当您至少有三个元素要进行测试时,请使用 MVT 测试。如果要测试的元素比这少,则运行一组 A/B 测试。
请选择您认为对结果有最强影响的页面元素。
不要在一个测试中包含太多的元素或位置。因为数量越多,测试时间就会越长。
提前对测试设计进行规划。在测试开始运行并开始收集和分析数据后,不建议编辑测试。
建议元素之间维持相互独立的关系。
例如,不要在同一测试中对布局和内容这两方面都进行测试。
由于体验数量的增加,需计划为 QA 提供额外的时间。您还可以使用部分因子测试来减少多变量测试所需的流量。 有关更多信息,请参阅下面的部分因子测试:
Target 提供全因子多变量测试作为内置活动选项。在统计学中,“实验设计”提供了多种方法或设计来确定哪些因素会影响结果。其中一种方法是 田口方法 进行部分因子测试。 田口方法使营销人员能够制定一套假设,减少所需测试体验的排列数量,从而降低多变量测试的流量需求。在 Target 中,可以利用此离线电子表格来使用这种功能和测试方法。
如果您的团队使用其他“实验设计”方法,则可以将此计算电子表格用作自定义实验设计的参考实施。
在您使用该离线计算电子表格时,请考虑以下提示:
有关更多注意事项和最佳实践,请参阅多变量测试最佳实践。
以下视频包含有关本文中所讨论概念的详细信息。
此概述视频介绍了Target Standard/Premium中可用的活动类型。 对多变量测试的讨论开始于 4:20。
本视频介绍如何了解和规划多变量测试,以及如何使用 Target 三步引导式工作流创建多变量测试。