AppAdhoc A/B Testing客户案例

用A/B测试持续提升产品

Dior唇膏着陆页优化

公司简介

克里斯汀·迪奥(英语:Christian Dior),简称迪奥(Dior),是著名法国时尚消费品牌。不论是时装、化妆品或是其他产品,Dior在时尚殿堂一直雄踞顶端。Dior继承着法国高级女装的传统,做工精细,代表着上流社会成熟女性的审美品位,象征着法国时装文化的最高精神。Dior品牌设计不断创新却始终保持高贵优雅的风格品位,演绎时尚魅惑,自信活力。除了高级时装外,Dior产品还有男装、香水、包包、皮草、内衣、化妆品、珠宝、鞋靴及童装等。

 

案例背景

2016年9月9日是迪奥红唇日,Dior需要在各个渠道投放广告(作为Dior在中国区的产销代理集团,路威酩轩是本次试验的直接沟通方)。产品部门希望广告的着陆页版本可以最大程度的激发用户兴趣,从而提高着陆页的点击转化率。为此,他们选取QQ音乐这一渠道作为此次 A/B测试 的试验背景环境,同时策划了两套不同的着陆页方案,通过对比不同版本的数据表现,帮助他们做出最终的投放决策。

 

测试方案

AppAdhoc A/B Testing采用科学的试验流量分割,使得每一组试验对象具备一致的用户特征,并在试验过程中也可以随时调整用户流量,使企业可以在新版本上线之前,以最低成本观察客户对多个优化方案的数据反馈。此外,AppAdhoc A/B Testing还支持“多链接合并试验”功能,因此Dior产品部门将已开发完成的不同链接页面集成到平台中,设置“点击订购次数”为优化指标。

方案一:原始版本,着陆页内容相对丰富,将海报、视频和购买版块聚集在同一个页面,用户可通过上下滑动查看不同版块。

%e5%8e%9f%e5%a7%8b%e7%89%88%e6%9c%ac 方案二:相较于原始版本,试验版本的内容简洁干净,只保留视频和产品详情两个入口,用户需要点击入口后分别跳转到不同页面才会看到与视频,产品、购买相关的信息。

%e8%af%95%e9%aa%8c%e7%89%88%e6%9c%ac

 

测试目标

本次试验的主要目标是,观察两个不同版本广告着陆页带来的点击转化率。通过对比不同方案的数据表现,选出转化率更高、综合反馈最好的版本作为本次广告投放的最终设计方案。

 

A/B测试数据反馈

用于Dior的广告流量较大,因此相同流量百分比的控制下,Dior的样本流量相对庞大。当试验运行到第3天的时候,置信区间已达到显著收敛,在运行至第7天时,试验数据趋于稳定,于是产品部门结束了本次的试验周期(一般来说,为了获得更加可信的数据结果,试验运行周期应至少保证1-2个完整的自然周)。在对比不同方案的数据后,产品部门作出了本次着陆页推广的版本决策。

-方案二的点击率远低于原始版本,在95%的置信区间下,方案二的点击率较原始版本低出70%以上。也就是说,如果贸然发布多入口的试验版本,Dior很可能会面临较大的损失;

-通过此次A/B测试,原始版本的下拉式着陆页胜,产品部门决定将原始版本作为此次活动的推广设计方案。

3778 Views
Please wait...

订阅我们

对于每位订阅读者,每两周,吆喝科技会为您发送4篇精选文章,可能是最新的A/B测试实践,也会是你所期待的增长干货。