1.在多变量测试时不要疯狂追逐测试变种的数量
建立MVT时,不要试图在每个页面上测试太多元素和变种。测试5个以上的不同页面元素,每个元素有超过3个变种,得到明显的测试结果就需要很长的时间。这是因为工具需要在每个组合上得到足够的流量,才能宣布明显的优胜者,如果你测试的页面流量很低这样的测试可能要花上好几个月。
测试大量的测试变种不仅需要更长的时间才能得到显著的结果,而且创建许多不同的测试版本也需要更长的时间(特别是在你需要大量帮助才能创建这些版本的情况下)。这可能严重降低每个月测试的数量,减慢优化策略的进展。
为了避免一次测试过多页面元素的问题,理想的情况下你应该尝试将测试限制在7元素以内,每个元素只有两个变种。
如果你想要测试7个以上元素,建议你用创新A/B测试代替,在这种测试中你创建个完全不同的页面,与当前页面进行对比次测试。获得一个明显的测试优胜者所花的时间相对来说要少得多,然后你可以在优胜页面版本的元素上进一步开展后续的测试。
2.确保测试挑战者有足够的差异
挑战者版本与控制版本过于相近,以至于访问者几乎注意不到差别(更不用说影响转化率了),这是测试表现不佳的较常见原因之一。当你测试设计人员控制创建的图形元素如横幅或者图片)时,特别容易出现此类问题。为了缓解这些问题,你应该与设计团队会谈,确保他们知道测试的动机和方向,给他们举一些显著不同版本的例子 。
理想情况下,你需要创建一个有显著不同的挑战者版本。例如,不要只是稍微改变个按钮的颜色;你应该进行更醒目、更明显的修改,例如使用差别很大的图片或者用词然而,如果不进行迭代测试找出对转化影响最大的元素,那么不建议一次修改多个元素如果你的挑战者版本需要不同的文本(例如,新的标题或者行动号召),你应该让营销团队帮助你创建变种,以增加它更好地影响访问者的概率。理想状况下,你应该让一位营销负责人专门负责这项任务,他将成为优化团队的一员。
3.不要花太多时间完善测试挑战者版本
测试缺乏效率的一个常见原因是将太多时间花在设计一个完善的测试变种上。你不应该在完善它们上花费太多时间,因为大部分版本最后无法获得优胜而留在网站上,相反,你只需要投资足够的时间表达变种的主要思想即可一一花费常规设计时间的80%,不要最困难、最费时的20%花在它们的完善上。
需要记住的关键点是,如果有必要,你总是可以对优胜版本进行调整,例如精确地符合品牌要求(只要你不对优胜版本进行重大修改,就不会使测试的结果失效)。
你应该明确地向设计部门强调这一点,并确保他们不会将太多的时间花在绝对地完善每个测试设计上。这样做就意味着运行测试所需要的可见资源较少,最终意味着你能更经常和更有效地运行测试。
4.及早规划测试资源
在你创建测试时,往往需要来自许多不同部门的帮助,包括IT部门(帮助测试的实施)、设计部门(帮助设计测试变种)以及营销部门(帮助提出与营销相关的改进,如行动号召或者标题)。
如果没有及早计划获得这类帮助和资源,就会导致你的测试创建很慢且效率低下,最终降低测试的频率(为了拥有一个长期有效的测试计划,你必须能够同时测试许多内容)。这种现象常常出现的原因是最后时刻的测试资源规划可能有被其他部门延迟的危险。最后时刻通常有许多有关测试的问题需要回答,这也会推迟启动的时间。
因此,你必须尽可能提前规划需要的资源并排定优先顺序,并且与项目经理紧密协作提高成功的可能性 。
5.在测试期间对流量主要来源的更改保持谨慎
另一个需要注意的事实是,在运行测试期间,流量来源模式的影响可能变化。前前面已经提到过,转化率在不同流量源中可能有很大的不同,因此可能严重地影响你的测试结果例如,如果你在网站上进行测试并且发起一个大型新闻邮件活动,这可能在几天内提高了你的转化率,你的测试在短期内看上去比实际的表现要好。这是因为新闻邮件流流量的来源质量较高,所以转化率往往更高。
另一个例子是,如果你的营销部门在测试中期开始一场付费搜索活动,这类的流量也更有针对性,有更大的转化可能,也会影响你的结果。
大部分较为高级的测试工具实际上都可以过滤分组或者流量,避免这类情形。因此在你启动测试之前,应该询问营销团队他们在测试期间是否计划举行可能改变网站流量质量(从而影响你的测试结果)的重大流量驱动活动,然后建立过滤器,在测试期间删除这些分组。
6.不要在开始时删除表现不住的测试版本
进行测试的人们常常受到诱惑,删除和排除似乎表现不佳的测试版本,特别是在他们或者其他人已经相信这些性性能不佳的版本不如其他测试版本好的情况下
这是很不好的,因为有时候网站设计 开始时表现不佳的测试版本可能随着时间的推移而变得更好,甚至最后得测试的胜利。因此,你应该保留所有测试变种.直到测试结束 。
本文地址://qlpinke.com//article/2651.html