良好的 A/B 测试实践 已翻译 100%

oschina 投递于 2013/07/14 10:14 (共 13 段, 翻译完成于 07-14)
阅读 4885
收藏 93
8
加载中

现在你可能已经听说过A/B测试了,虽然听起来像是个很花哨的术语,但请相信我,A/B测试不止是个花哨的术语。 A/B测试是个非常棒的实践,通过它,营销人员、公司、广告客户以及创业公司就能够深入了解访问者的行为模式从而找出提高转化率的好办法。

然而,现在A/B测试实践仍然还不怎么流行,通常也只有专业人员在使用它。这可能是因为大多数人还没有意识到这种技术的存在。本文就是要教会你这种技术,并引领你走向良好的A/B测试实践。

fbm
fbm
翻译于 2013/07/14 15:11
1

什么是A/B测试?

A/B测试就是它字面上所表达的意思:某个元素(在我们这种情况下,这个元素指的就是一个界面或者一个网站)有两个版本,另外还有一个用来决出每个版本的成功程度的指标。之所以采用这种测试办法,就是为了在两个可用的版本间找出更胜一筹者。A/B测试可使用多种不同的工具来完成。

AB Testing

假设你有两个设计方案,但你并不知道对你来说哪个方案更好。你要做的就是将你的网站的流量平均分为两个部分,每个部分的流量访问其中的一个设计方案。经过一个预先设定好的时间段之后,你就对既定指标进行计算。采用这种实践,你可以深入了解许多和转化率、召唤点击性能(Call-to-action performance)以及跳出率等等相关的东西。最后基于你所关心的指标,你将在这两个版本中,选出那个最好的版本。

fbm
fbm
翻译于 2013/07/14 15:30
1

从哪里开始进行测试?

大部分情况下这取决于你为你的网站设定了什么样的目标。测试的起点可以是你要出售的网站,也可以是带有注册表单的登录页面,还可以是“请联系我们”的表单。只要你觉得哪里的用户行为对你的目标来说很重要,你就可以从哪里开始进行测试。有许多东西你都可以用A/B技术来测试,但其中人们用它测试最多的内容有:

  • 图片的放置
  • 价位展示
  • 注册表单
  • 召唤点击元素
  • 标题描述

既然现在你对什么是A/B测试已经有了一个基本的了解,下面让我们来看看哪些是我要鼓励你去做的,哪些是我不推荐你去做的,在后者中我不推荐你做的那些事情最有可能会对你的结果产生负面影响。

fbm
fbm
翻译于 2013/07/14 15:44
2

应该做什么?

常言道忍耐是一种美德,我们所有人以前至少听说过一次这种说法。不要在短时间内就放弃对A/B测试来讲,至关重要。只要你等待更长一段时间之后,就会得到非常重大成果。A/B测试的运行时间可以是几天甚至到几个月,这完全取决于几个变量;如果是想提高转化率,你可以到这里来计算这个时长。

A/B测试工具通常要有的一个功能就是,它应该记住用户上次访问你的网站时,他去过的页面是哪个版本的,然后就只会把该用户重新导向那个版本的网页。当用户访问进入页面时,每次都会看到不同的版本最可能的是会让用户迷惑不解,这不会对你的测试有任何的帮助的。

Split

fbm
fbm
翻译于 2013/07/14 16:04
1

A/B测试在你的整个网站中要有一致性。如果你要测试的元素会出现在多个网页中,那么就要象上文中的那个建议一样,一定要让每个用户看到的的总是同一个版本。当用户在你的网站上浏览时,老是看到一个元素的不同版本同样也会令人困惑,从而降低A/B测试对你的帮助作用。

我建议你要做尽可能多的测试。有可能在你进行第一次甚至还可能是在第二次测试时,所得到的效果平平或者甚至是更差了。再测第三次就有可能得到良好的效果了,所以一定要大量进行A/B测试。A/B测试做起来实际并没有多大代价,也不需要你自己来花太多精力。只要你对当前网站进行了新一轮迭代设计,无论这次迭代规模有多小,一定要对它进行A/B测试!你可能会因为发现有多小的细节都会影响你的转化率而感到吃惊不已。

fbm
fbm
翻译于 2013/07/14 16:15
1

我还要推荐的另外一件事是,无论上次的测试结果有多么正确、多么有帮助,你都要坚持继续进行A/B测试。将以前的正确结果再累加上更多的正确结果只会更加快速地帮助你实现你的目标。让我们来做个假设。我们有个新开张的网站,现在想提高其转化率,目前它的转化率是23%。在做了两个月的A/B测试之后,转化率提高到了29%。许多人都会认为6%的提高已经是个相当不错的结果了(初始转化率的提高远远超过了25%),便就此止步。我的建议是继续进行测试。除非转化率已经是100%了(顺便说一句,这是不可能的),否则就仍需继续进行测试。 A/B测试代价如此之低,如果不考虑进行A/B测试那就太愚蠢了。

对不同版本进行测试总是需要同时进行。比如,一周后再测试另外的版本是一种错误的做A/B测试的方式。访问流量需要同时在不同的版本间进行划分,因为有可能出现第一周内销售业绩不佳,而第二周的销售业绩非常不错的情况。这不不一定意味着在第二周内使用的那个版本更好。倒是情况有可能是,第二个版本是在人们领到工资后马上进行测试的。或者是还有什么你所不了解的情况发生而影响到了测试结果。一定要总是同时进行多版本测试。

fbm
fbm
翻译于 2013/07/14 16:50
1

不应该做什么?

如果你的新版本同当前网站(当前网站也称作控制点(congtrol))的区别非常大,那就不要把老访客包含到新测试中。你可不会想用如此突然的新设计来打击已经习惯你的网站的访问者。

永远不要用直觉来判定测试结果的优劣!你可能不需要那个大大的蓝色按钮,但如果测试结果表明这个按钮的效果更好,那就一定要选用它。测试结果并不总是同你的感觉有关系。请记住,实际上测试结果从来都跟你的感觉没有什么关系。A/B测试的从来都不是关于你喜欢或者不喜欢什么的,而是关于什么才能实现你的目标的。不要只是因为你对某个版本有偏见而拒绝有效的测试结果。

fbm
fbm
翻译于 2013/07/14 17:02
1

不要仅仅针对设计问题和美观问题进行测试。请记住,内容同样重要。这里所说的内容可以是正文,但也可以是正文中个段落的小标题以及网站的大标题。虽然这些内容貌似不怎么重要,但是对于新访问者来讲,它们可能会产生一定的误导作用,从而让新访问者对网站中发生了什么事情产生错误的认识。正确的标题能够帮你提高销售业绩,但同样也可能会帮你降低弹出率。

Goal Page

如果你正在考虑进行多轮迭代设计,那就不要一次仅仅测试两个版本。你可以同时对多个迭代设计进行测试,但是,要测试的版本越多,你每天需要的访问者总数就要越大。在测试时,你不能把100个访问者分配给6个不同的版本,这种做法不会得到好的效果的 —— 由于每日的访客太少所以你就需要更长的测试时间,而这样做的效果根本就是得不偿失。

fbm
fbm
翻译于 2013/07/14 17:14
1

比如说,网站目前的转化率是30%,现在要提高到40%,而网站每日访客总数为10.000。对6个不同版本进行测试要得到正确的结果,可能需要运行几天。然而,如果每日访客总数才刚刚到200,那么要达到相同的效果,测试就可能需要运行4个月左右。

你可能已经开始进行A/B测试了,这方面网上已经有许多可用的工具了。所以,我们搜集了一些最好的工具以供你选用。

fbm
fbm
翻译于 2013/07/14 17:20
1

Optimizely

Optimizely

Optimizely是网上现有的最专业的A/B测试工具之一。它的价格可能要比其它工具高很多(可也免费使用一个月),但它提供了一些非常棒的功能。如果你对A/B测试的态度是认真的,并想向马上开始进行A/B测试,它绝对是是你在起步时最好应该使用的工具。

fbm
fbm
翻译于 2013/07/14 17:26
1
本文中的所有译文仅用于学习和交流目的,转载请务必注明文章译者、出处、和本文链接。
我们的翻译工作遵照 CC 协议,如果我们的工作有侵犯到您的权益,请及时联系我们。
加载中

评论(10)

业余编程人士
业余编程人士
相当好的一篇文章
唐炒栗子
这种测试方式,几个公司能承受这个时间成本
fbm
fbm

引用来自“Cynic222”的评论

http://www.oschina.net/translate/most-of-your-abtests-will-fail 真无聊啊~~

啊哈,不同的人有不同的观点,这也不算特别特别的意外嘛,各方面意见都可以作为参考,然后按照自己的实际情况自己做决定,岂不更好? ^_^
ouweiguo
ouweiguo

引用来自“lanybass”的评论

cnbeta表示,直接上线即可分辨,引来一片骂声表示老版本比新版本好。

ss
ouweiguo
ouweiguo

引用来自“m2这个名字注册不了”的评论

引用来自“Cynic222”的评论

http://www.oschina.net/translate/most-of-your-abtests-will-fail 真无聊啊~~

tonggan~

tt
lanybass
lanybass
cnbeta表示,直接上线即可分辨,引来一片骂声表示老版本比新版本好。
BENNEE
BENNEE

引用来自“Cynic222”的评论

http://www.oschina.net/translate/most-of-your-abtests-will-fail 真无聊啊~~

tonggan~
可观
可观

引用来自“55555”的评论

A/B测试可以认为是SEO的一个分支细节吗?

A/B 测试不仅与SEO相关,现在的网站运营体系中,任何UE/UI 的变化都需要可靠数据来支撑,A/B Test 就是进行真实环境线上检验的最普遍手段
web5
web5
A/B测试可以认为是SEO的一个分支细节吗?
返回顶部
顶部