互动 先见
+ - - - - - -
{{项目。标签}}
的见解

如何采用数据驱动的方法进行a /B测试

虽然数学和设计似乎是不常见的合作伙伴,但我们在Seer的理念是总是使用尽可能多的数据来驱动设计决策——特别是在涉及A/B测试时。

A/B测试的数据驱动方法意味着为成功做准备:1)预测潜在的障碍;2)确保你有明确的基准来衡量结果。

关于这种方法需要强调的一点是,无论A/B测试平台如何,它都是有用的;虽然如果你使用谷歌优化,看看我们的安装说明AdWords集成,优化vs.优化360文章。这些技巧应该适用于你想要测试的任何领域或方式!

粘贴图像0 34

你可能会问为什么要数据驱动?你只要发泄一下就会没事的,对吧?

总结这一点最简单的方法是,要进行A/B检验,你必须确定你要检验的假设。理想情况下,这个假设应该由你收集的数据来提供信息,而不是用数据来支持它(你有严重的风险确认偏误在这里!)拥有尽可能多的(有用的)数据来形成那个无偏的假设是有益的。通过结合定量(GA)和定性(Hotjar),以及页面的目的和设计的专业知识,你可以看到强大的结果。

数据驱动的A/B测试过程

检测前的准备

那么,你需要做些什么才能成为数据驱动?第一个关键步骤是在谷歌分析中检查您的页面。这非常简单,只需列出前25个登陆页面,然后查看流量水平、用户粘性指标(跳出率、页面/会话等)和转化率。

粘贴图像0 35

在开始考试之前,问以下关于考试内容的关键问题:

  1. 我有足够的流量进行测试吗统计上显著?
  2. 访问者是否参与了这个页面(即跳出率或页面/会话高于或低于网站率)?
  3. 访问者是否采取了我们希望他们采取的行动(即转化率高于或低于网站率)?

在最后一点上,一个更简单的简化方法是问:你的页面试图实现什么目的,从而将访问者转化到你的网站,这是立即清楚的吗?一个不了解你的业务的亲戚能够来到这个页面,并描述他们应该做什么?如果你正在努力做到这一点,你可以使用像这样的工具用户测试只需少量费用,就可以在您的页面上实时获得真实的人类洞察力。

测试工具

要记住的另一个重要方面是,你不应该仅仅依赖GA(或其他分析工具)来获取定量数据。使用类似于HotJarCrazyEgg要获得额外的点击图、滚动图、访问者记录和民意调查数据,对于充分了解您的受众、他们的需求以及您计划的测试区域是否满足他们来说是绝对重要的。深刻理解UX最佳实践通知一个成功的测试变量也是至关重要的。

如果您没有内部资源来从设计的角度充分准备,Seer有一个数据驱动的设计团队驱动的结果

测试评估

一旦您选择了您想要使用的工具来为您的测试收集数据,让我们对要测试的内容进行评估。这可以通过两种方式实现:

  1. 对所有可能的区域进行评估,将范围缩小到流量大但参与度和转化率较低的区域。
  2. 使用与#1相同的标准,对对业务很重要的页面子集进行评估。

如果可能,第二种选择总是更可取的,原因如下:

  1. 你可以通过与那些使用过这个页面的人进行内部交谈来获得更多有用的信息——它是如何设计的(以及页面的原始意图/目标),他们对当前状态的感觉如何,他们的更新愿望清单是什么,等等。
  2. 如果你能够证明这一领域的结果,这便能够让CMO或更高级别的人注意到为什么a /B测试(以及数据驱动设计)是重要的,以及为什么它应该继续下去。在关键站点区域显示这些底线结果!

一旦你决定了你想要测试的领域,收集尽可能多的关于这个领域的信息,并以一种容易理解的方式打破你的计划。

测试前假设发展

展示你的测试计划、支持它的数据等等将会很容易让人接受。如果没有这个,就像是“让我们来测试一下吧?”这种情况下,别人说“不”比你说“不”更容易支持你的假设和计划.理想情况下,你的演讲应该包括以下信息:

  1. 为什么要测试这个页面?
  2. 现在我们在这个页面上转换访问者行为的过程中看到了什么?
  3. 我们的假设是什么?
  4. 基于这个假设,我们推荐哪些数据驱动的变化?
  5. 我们预期会有什么影响?

一旦您实际接受了测试,就可以开始设置测试本身了。您应该在开始测试之前设置结果和成功度量。这将允许您显示测试是否成功,并轻松地在两种场景中进行旋转。

粘贴图像0 36测试后结果与分析

一旦您的测试已经运行,并且您已经收集了针对Control变量(即页面的原始版本)的统计意义,您就可以结束您的测试了。从这一点开始,您应该更新您的演示文稿以显示测试的结果,并采取以下路线:

  1. 如果成功(基于您之前设置的基准测试和来自Control的结果),则移动到永久更新页面。
  2. 如果不成功,分析结果以确定任何关键的学习/收获,为未来的优化提供信息。

关于这些路径,有两件重要的事情需要记住:

  1. 测试,即使不成功,也绝不是浪费时间。您仍然了解到哪些是无效的,并缩小了将来进行测试的领域。这就是排除法的成功!
  2. 测试不是一次性的过程——即使某个领域成功了,你也没有完善它。测试是一个迭代的过程在美国,一次成功的测试意味着“这个成功了,下一步是什么?”

结论与总结

现在,有了这个过程,您将首先测试什么?你将使用哪些数据来源来形成你的假设?为了形成更好的假设,你可以与哪些客户或内部利益相关者交谈?为了获得支持,你会向谁推销你的产品?考试结束后你将如何分享你的成绩?

所有这些都是你在开始之前应该问自己的问题。

有了对这些区域背后的数据和可以转化访问者的设计的清晰理解,你就为a /B测试的成功做好了准备。你的数据和你的设计之间的对称可以导致一个真正美丽的结果。

额外的资源


订阅时事通讯

我们乐于帮助像您这样的营销人员。

注册我们的通讯,接收更新和更多信息: