AppAdhoc A/B Testing客户案例

用A/B测试持续提升产品

乐动力-商品详情页优化

一、公司简介

乐动力,是一款面向全民的一站式健身软件与解决方案提供方。其功能涵盖跑步、健身、健康饮食、舒缓疲劳等常见健康领域,旨在帮助用户随时随地练就完美身材。凭借着专业的健康指导与良好的移动端体验,乐动力成为第一款由中国团队开发而苹果App Store年度精选优秀 App 大奖的App。目前,乐动力已经完成A轮融资,日活和月活分别高达300 万+和500万+ ,是国内乃至国际皆不可多得的优质智能健康平台。

乐动力--全民健身解决方案平台

乐动力——全民健身解决方案平台

二、案例背景

随着活跃用户规模不断扩大,用户对乐动力所能提供的健身周边产品和服务需求日益旺盛。为了更好的满足目标用户的痛点需求并实现流量变现,摆在乐动力面前的首要任务是如何稳定快速提升电商页面的转化率。Appadhoc A/B Testing 不仅可以是实现优化方案的先验性和并行性,还具有科学的流量分割和统计功能,能够帮助乐动力以最小的成本快速确定优化方向、稳定提升电商转化率。因此,乐动力最终决定使用吆喝科技提供的A/B测试云平台。

三、试验方案

乐动力的核心需求是提高电商页面产品列表的转化率。在现有页面的基础上,产品运营同学提出一个假设——在产品SKU的列表页面上添加“去购买”字样的CTA按钮有可能可以提高产品的列表的购买转化率。因而,需要设计一组 A/B测试来检验两个版本在购买转化率方面的表现。

版本对比

基于以上试验需求,吆喝科技与乐动力一起设计了一组多链接对比试验(如图)。得益于Appadhoc A/B Testing良好前后端兼容性和友好的可视化编辑功能,试验中为新旧版本各是一个独立的URL,并通过该平台实时调节和监测数据,实现了响应速度快、埋点工作量低的特色功能。

四、试验目标

本次A/B测试的主要目的是验证“产品SKU的列表页面上添加“去购买”字样的CTA按钮能否带来比原始版本更高的购买转化率,核心关注的目标数据是SKU点击数和购买转化率”,并参考两个版本的置信区间。

新版本的置信区间和旧版本相比:

  • 如果出现置信区间同正或同负的情况,说明新版本(加了“去购买”CTA 的版本)带来了正面的或负面的增长;
  • 如果样本量一定的情况下,置信区间一正一负,说此次改进没有显著效果,可以换一个优化方向。

五、A/B测试数据反馈

本次试验是在乐动移动端进行,试验周期维持了一周。产品运营部门在Appadhoc A/B Testing实时数据统计和多维度分析功能帮助下很快得出了科学的试验结论。

转化率

-试验数据表明,产品运营部门的假设并不成立;

试验中,通过Appadhoc A/B Testing的科学流量分割与实时调节功能,我们为试验版本逐步分配10%、20%到40%的流量,带有“去购买”按钮页面均值转化并无显著变化,而不带“去购买”页面反而在“转化人数”方面转化显著。最终,我们建议客户使用不带“去购买”的版本。

这次A/B测试不仅帮助乐动力避免了盲目创新带来的更新风险和用户流失,并且帮助其进一步明确产品优化方向,把精力放在其他可以提升转化率的方面。

 

3068 Views
即刻实践文章理论 A/B测试 灰度发布 产品优化 免费申请
Please wait...

订阅我们

对于每位订阅读者,每两周,吆喝科技会为您发送4篇精选文章,可能是最新的A/B测试实践,也会是你所期待的增长干货。