不同的网站 A/B 测试会干扰任一测试的结果吗?



我有一个关于在网站上针对不同页面进行A/B测试的问题,如果我担心它们会干扰任何一个测试结果。这并不重要,但是我正在使用Visual网站优化器进行测试。

例如,如果我有两个A/B测试在订单放置流程中在不同页面上运行,我是否应该担心对同一转换目标对一个Anothers目标转换率产生影响的测试?例如,我在一个网站上进行了两个测试,一个测试在产品详细信息页面上,另一个在购物车上运行。最终,我想知道任何一个页面的变体是否会影响订单放置转换率。我不确定是否应该关心不同的测试结果,如果它们同时运行。

我的直觉告诉我,我们不必担心它,因为每个页面上的访问者都会在另一个页面的每个变体中分发。因此,产品详细信息页面版本A将在购物车的A和B变体中分发访问者,因此,即使访问者从访问者中看到不同版本的购物车,产品详细信息页面的影响仍将正确测量订单转换。另一个测试。当然,我可能完全错了,希望有统计背景的人可以更精确地回答这个问题。

我能想到的唯一问题是一个页面的变化与另一页的变化之间的组合比其他组合更好。但这似乎不太可能。

我不确定我是否足够清楚地解释了这个问题,所以请让我知道我的问题是否有意义。我搜索了网络和stackoverflow寻求答案,但是我没有任何运气找到任何东西。

我了解您的问题,并且没有快速的答案,这取决于您正在运行的测试类型。有时,不同页面上的A/B测试相互影响,特别是如果它们在相同的动作序列中,例如结帐。

一个简单的示例,如果在您的第一页上,则变体A说"单击此处查看定价",而变化B表示"单击此处获取500美元现金"。您可能会发现单击B上的B更高,并声明一个成功。用户点击后,在下一页上,就会要求输入其信用卡详细信息,而变化为"付费"按钮是绿色或红色。在这种情况下,Variation A的人们可能会更有机会实际进入CC细节并转换为变化B,而不是可能受到作弊的变化。

我注意到网站处于开创性阶段时,他们试图感觉到客户对良好的反应,这些多元测试的重大变化更为重要。但是,当存在一些稳定性和流量时,这些变化往往非常微妙,整体信息和流程相同,并且A/B测试变得更加微妙。在这些情况下,多页面交叉测试中的价值可能会较少(页面上的背景颜色意味着在过程中有三页的内容吗?)。

希望这个答案有帮助!

最新更新