A/B 测试案例 (1)

最近收集了一些 A/B 测试案例,下面是一些个人觉得有代表性的。

1、来自SimCity的案例

今年,EA 公司发布新版《模拟城市》(SimCity)游戏时,在 simcity.com 网站做了一个 A/B 测试,以便试验转化率在不同的布局下是否有变化。

下面是两个不同的版本:

A版本 B版本

B 版本与 A 版本的差别在于新版本删除了 Pre-Order 的促销广告图片,页面更清爽一些。

结果数据显示,A 版本的转化率为 5.8%,B 版本的转化率为 10.2%,提高了 43.4%。

这几乎是一个完美的 A/B 测试案例:有明确的测试目标,清晰的衡量标准(订单转化率),以及完美的结果数字。

2、来自 HubSpot 的案例

集客式营销公司 HubSpot 也做了一个关于表单转化率的 A/B 测试。

A版本 B版本

与 B 版本相比,A 版本去掉了右侧表单上方的女性头像,调整了表单字段的排版,同时在左侧正文中添加一行加粗的标题。

一个有趣的事实是,事后的在线调查显示大部分人认为 B 版本会胜出,但事实上胜出的是 A 版本,A 版本的转化率比 B 版本高了 24%。

这种结果是很难预言的,因为有时候加上一个人类图像反而会增加转化率。不过正是因为如此(难以预言),A/B 测试才显得很有必要。

3、来自 ZAGG 的案例

ZAGG 是最大的移动电子产品电商网站之一,他们网站上的产品页面现在有三种类型的产品展示方式:静态图片、视频以及 360 度产品图片。

在 ZAGG 产品页面最初的设计中,访客默认看到的是静态图片。ZAGG 的分析师做了一个 A/B 测试,试图找出在产品页面默认使用视频或者图片会不会对“加入购物车”的按钮的点击有影响。他们发现默认显示视频会让客单价(revenue per visitor)增加 27%。ZAGG 并没有止步于这个成果,他们继续深入寻找可优化的地方。

他发现 360 度图片很流行,便决定试一下使用这种设计的 ZAGG 的产品页与原来相比表现如何。他们的直觉是视频的效果最好,他们相信 360 度图片应该是介于静态图与视频之间的一种平衡。

A版本 B版本
默认使用视频介绍的版本 默认使用 360 度图片介绍的版本

在第一个测试中,从默认使用静态图片到默认使用视频的转变让客单价提高了 27%。第二个测试,即从默认使用视频到默认使用360度图片的测试,则让 ZAGG 的客单价又提高了 12%。

也就是说,只是简单地将产品页面的默认显示改为使用 360 度图片,就让收入增加了接近 40%。

ZAGG 的实验证明了那类无需投入新资源的 A/B 测试的价值。探索并构建新的产品创意当然是非常必要的,不过有时候或许也能用一种新鲜的方式重组当前内容,从而取得巨大的转化率胜利。ZAGG 证明,就算没有开发新特性,只利用现有的资源,也有可能改善并提高站点的转化率。

参考:

  1. http://blog.optimizely.com/
  2. http://whichtestwon.com/
分类:文章标签:A-B测试
前一篇:关于切尾均值

相关文章:

评论:

夏灏

非常受益!请问有好的AB test软件推荐吗?谢谢!

oldj

貌似还没有很方便的软件,很多这类工具都是和网站系统耦合很深的,比较难做到通用。

国外有一些通用的工具,比如:

https://www.optimizely.com/

http://visualwebsiteoptimizer.com/

你可以研究下。

夏灏

我的qq邮箱是1536159171@qq.com,如方便请发至邮箱。多谢!

PM 周刊第 36 期 2016-07-25 | 神刀安全网

[…] A/B 测试案例 […]

发表评论: