AppAdhoc A/B Testing客户案例

用A/B测试持续提升产品

Sunvalley购买按钮位置优化

公司简介

Sunvalley集团成立于2007年,是一家致力于为全球电子商务用户提供“一体化”全程服务的互联网科技跨国集团公司。2008年起,Sunvalley运营总部从美国硅谷迁回深圳。集团旗下产品丰富多样,供应链遍布全球各地,方便并改善了成千上万用户的日常生活。

 

案例背景

与大部分电商网站相同,如何把用户对商品的兴趣转化为最终购买行为,是sunvalley在产品运营中非常关键的环节。在了解到AppAdhoc的可视化编辑功能后,产品部门决定通过A/B测试的方式,在基本不动用开发资源的基础上,对页面做出优化调整。同时可以实时观察页面调整后的数据反馈,在正式决策前,找到最有效的页面展示方案。

 

测试方案

AppAdhoc A/B Testing采用科学的试验流量分割,使得每一组试验对象具备一致的用户特征,并在试验过程中也可以随时调整用户流量,使企业可以在新版本上线之前,以最低成本观察客户对多个优化方案的数据反馈。同时,根据试验的数据发现用户反馈效果最好的版本,作为最终的新版本迭代方案。

基于目前的商品展示页面,产品部门设计试验方案如下:

%e7%89%88%e6%9c%ac%e5%af%b9%e6%af%94

原始版本:商品页面的购买按钮位于标题下方、价格标签左侧;

试验版本:将购买按钮移动至价格标签右侧,其余页面布局不变。

同时,将购买按钮的点击数据作为本次试验的核心优化指标。

 

测试目标

本次试验的主要目标是,验证将购买按钮调至不同位置是否可以带来更高的用户点击,从而找到更有利于页面转化的设计方案。

 

A/B测试数据反馈

本次试验在PC端网页进行,由于sunvalley的网站流量较小,因此试验周期将近一个月(一般来说,为了获得更加可信的数据结果,试验运行周期应至少保证1-2个完整的自然周)。在对试验数据做进一步分析后,产品部门的假设得到了科学地验证。

-原始版本胜出,不论是均值还是人数转化,试验版本的数据均差于原始版本,约下降24%;

-尽管置信区间未收敛,但考虑到样本数据的下降幅度,产品部门还是决定放弃试验版本的优化方案,进一步构思其他可能的布局设计。

2220 Views
Please wait...

订阅我们

对于每位订阅读者,每两周,吆喝科技会为您发送4篇精选文章,可能是最新的A/B测试实践,也会是你所期待的增长干货。