AppAdhoc A/B Testing客户案例

用A/B测试持续提升产品

招商信诺着陆页优化

 

公司简介

招商信诺人寿保险有限公司(简称”招商信诺”)是一家以健康医疗险为特色的中外合资寿险公司,中外股东为招商银行股份有限公司和美国信诺集团旗下的信诺北美人寿保险公司,双方各控股50%。秉承“诚信百年,一诺千金”的企业精神,招商信诺的业务涵括返还型重疾保险、少儿教育金保险、中老年健康保险、癌症报销保险等多种寿险产品,致力成为客户真正的朋友,愿每位客户拥有健康幸福的人生。

 

案例背景

信息流广告投放是招商信诺获取用户线索的重用方式之一,由于在投放过程中会不断产生获客成本,因此如何在迭代过程中快速找到促进着陆页转化增长的方案,是市场运营部门最关注的优化内容。通过A/B测试,他们可以同时在线运行多个版本,更加高效的找出最优版本。

 

测试方案

AppAdhoc A/B Testing采用科学的试验流量分割,使得每一组试验对象具备一致的用户特征,并在试验过程中也可以随时调整用户流量,使企业可以在新版本上线之前,以最低成本观察客户对多个优化方案的数据反馈。同时,根据试验的数据发现用户反馈效果最好的版本,作为最终的新版本迭代方案。本次试验,市场运营部门提出假设:在表单中增加一项信息,不仅可以获取更多用户线索,同时也不会影响最终转化。

于是,针对现有着陆页样式,设计试验方案如下:

%e7%89%88%e6%9c%ac%e5%af%b9%e6%af%94

原始版本:用户须填写的表单信息为5项,即性别、年龄、计划缴费金额、姓名、电话;

试验版本:增加1项“期望保障年限”信息,用户须完整填写6项信息后方可提交表单,其余页面元素保持不变。

同时,将“立即测报费”的按钮点击情况作为本次试验的核心关注指标。

 

测试目标

这次试验的主要目标是,通过对比两种设计方案的核心指标数据,找到能够有效提升按钮转化率的页面样式,验证市场部门的假设是否成立。

 

A/B测试数据反馈

考虑到快速优化迭代的需求,本次试验的运行周期仅为2天(一般来说,为了获得更加可信的数据结果,试验运行周期应至少保证1-2个完整的自然周)。通过对试验数据的对比分析,市场运营部门得到了科学的试验结论。

-本次试验共收到6w左右的样本数据,结果表明试验版本的保费测算率低于原始版本,样本数据均值下降了32.33%;

-推测可能的原因在于,试验版本增加了一项表单内容,提高了用户提交的成本,同时,原始版本页面下方的投保优势内容也因为表单项的增多,下移至首屏以外,用户需要下滑屏幕才能看到,在一定程度上可能会对用户行为产生影响;

-因此,市场运营部门决定保留原始版本的页面和表单内容,从其他角度入手考虑下一步优化方向。

5312 Views
即刻实践文章理论 A/B测试 灰度发布 产品优化 免费申请
Please wait...

订阅我们

对于每位订阅读者,每两周,吆喝科技会为您发送4篇精选文章,可能是最新的A/B测试实践,也会是你所期待的增长干货。