AppAdhoc A/B Testing客户案例

用A/B测试持续提升产品

泰康在线首页广告位优化

公司简介

2000年,泰康在线网站上线,是国内第一家由寿险公司投资建设、实现在线投保的网站,也是国内首家通过保险类CA认证的网站。泰康在线利用当时最先进的网络技术,在国内率先实现了保单设计、投保、核保、缴费、后续服务的全过程网络化,是国内首家真正意义上的“在线保险”。作为泰康人寿的官方网站,泰康在线始终是泰康人寿互联网业务的主要平台。2015年11月,作为行业内首家由国内大型保险企业发起成立的互联网保险公司,泰康人寿的全资子公司——泰康在线财产保险股份有限公司正式挂牌成立。泰康在线致力于互联网保险业务的创新与开拓,整合线上、线下保险服务,提供普惠保险产品,打造“活力养老、高端医疗、卓越理财、终极关怀”四位一体的互联网生态圈。目前,泰康在线已形成互联网产寿险结合的保险产品体系,产品线涵盖互联网财产险、旅行险、健康险、意外险、年金和投资连结险等。

 

案例背景

对于移动电商来说,产品首页绝对是寸土寸金,第一屏的空间更是如此,如何利用第一屏空间更好的给爆款产品或活动导流是非常重要优化的方向。在互联网产品圈,“少即是多”的原则经常被提起,同时也有无数案例表明给用户的选择越多,用户越迷茫,也许转化率会越差。但是第一屏只设置一个广告位是不是太过浪费?设置更多的广告位会不会有更好的效果呢?带着这个疑问,泰康在线的产品部门决定通过 A/B测试 寻求解答。

 

测试方案

AppAdhoc A/B Testing采用科学的试验流量分割,使得每一组试验对象具备一致的用户特征,并在试验过程中也可以随时调整用户流量,使企业可以在新版本上线之前,以最低成本观察客户对多个优化方案的数据反馈。同时,根据试验的数据发现用户反馈效果最好的版本,作为最终的新版本迭代方案。

针对应用首页的布局,产品部门分别设计试验方案如下:

%e5%b9%bf%e5%91%8a%e4%bd%8d%e5%b1%95%e7%a4%ba%e4%bc%98%e5%8c%96

原始版本:在banner位下方,只设置单一广告图;

试验版本:在banner位下方,分别设置3个不同的广告位,中间广告图与原始版本广告位链接的地址一致,其余元素保持不变

同时,将不同广告位的图片点击量和最终转化数量设置为此次试验的优化指标。

 

测试目标

本次试验的主要目标是,检验广告位的不同布局方式对用户点击广告的影响,从而判断设置更多广告位是否能够更好的利用产品首页资源。

 

A/B测试数据反馈

此次试验在泰康在线的网页移动端进行,累计运行了近3周的时间(一般来说,为了获得更加可信的数据结果,试验运行周期应至少保证1-2个完整的自然周)。在对试验数据进一步分析后,产品部门得到了意想不到的数据结果。

 

原始版本(单幅广告) 试验版本(三幅广告)
页面总UV 40889 41020
页面总PV 87105 86857
点击数 687 中间图:816

三幅图总量:5016

转化人数 626 中间图:730

三幅图总量:3206

转化率(转化人数/UV) 1.53% 中间图:1.78%

三幅图总量:7.82%

 

-试验版本的方案明显优于原始版本:试验版本的广告点击总量元高于原始版本,同时试验版本的总转化率是原始版本的1倍;

-仅对比与原始版本链接相同的试验版本中间广告位,发现不论是点击数量还是转化率,都高于原始版本的数据;

-产品部门决定使用试验版本的方案对首页广告位进行布局,推断试验版本效果较好的原因,可能在于原始版本与产品页面的其他内容融入度较低,用户会直接判断为广告而跳过点击。

4570 Views
即刻实践文章理论 A/B测试 灰度发布 产品优化 免费申请
Please wait...

订阅我们

对于每位订阅读者,每两周,吆喝科技会为您发送4篇精选文章,可能是最新的A/B测试实践,也会是你所期待的增长干货。