AppAdhoc A/B Testing客户案例

用A/B测试持续提升产品

虎扑M站标题展示优化

公司简介

虎扑成立于2004年,是中国资源优势及营销实力的专业体育营销公司,总部位于上海。作为中国最大的体育互联网平台,虎扑为5000万的全平台月均活跃用户提供体育新闻,互动社区,电子商务,赛事活动等服务。其拥有1.5亿的PC端日均访问量,5600万的APP装机量。同时,虎扑与30多家国内外顶级体育组织机构结成战略合作伙伴关系,其中包括中国篮协、中超联赛、国家体育场、美国橄榄球联盟、德甲拜仁慕尼黑俱乐部、英超利物浦俱乐部、荷甲阿贾克斯俱乐部等。作为国内互联网体育的领导者和体育互动娱乐行业新平台建设者,虎扑将为所有喜爱体育的人们提供完整的覆盖线上线下的多样化服务、内容和应用,同时致力于帮助其他企业和机构在该生态系统中寻求最大化的商业价值与创新机会。

 

案例背景

虎扑移动组的产品部门,在产品优化过程中,对虎扑M站新闻以及论坛版块的标题显示方式有着不同的观点:有图标题对用户有更形象的吸引力,但同时,单屏可显示的帖子数相应也减少,用户需要通过滑动显示更多帖子;而无图标题的优劣势刚好相反。究竟哪种展示方案能够推动用户达到更高的新闻/帖子浏览点击量?于是,产品部门决定通过 A/B测试 的方式检验标题显示对点击量的影响。

 

测试方案

AppAdhoc A/B Testing采用科学的试验流量分割,使得每一组试验对象具备一致的用户特征,并在试验过程中也可以随时调整用户流量,使企业可以在新版本上线之前,以最低成本观察客户对多个优化方案的数据反馈。同时,根据试验的数据发现用户反馈效果最好的版本,作为最终的新版本迭代方案。

根据不同的版块形态,产品部门分别设计试验方案如下:

M站新闻版块:原始版本的左侧附带新闻图片;试验版本将标题图片去除,只保留文字部分。

m%e7%ab%99%e6%96%b0%e9%97%bb%e7%89%88%e5%9d%97

M站论坛版块:原始版本为无图版本;试验版本新增标题图片至标题左侧,其余元素保持不变。

m%e7%ab%99%e8%ae%ba%e5%9d%9b%e7%89%88%e5%9d%97

同时,将新闻总点击次数、论坛帖子总点击次数设置为此次试验的优化指标。

 

测试目标

本次试验的主要目标是,观察不同的标题显示方案对新闻/帖子点击量的影响,通过对比各个方案的试验数据,选择出最能够促进点击量的显示方式。

 

A/B测试数据反馈

此次试验在虎扑的网页移动端进行,累计运行了2周的时间(一般来说,为了获得更加可信的数据结果,试验运行周期应至少保证1-2个完整的自然周)。在对试验数据进一步分析后,产品部门得到了最终的结论。

-M站的新闻版块和论坛版块的试验结果均呈显著效果;

-对于新闻版块,无图标题的方式总点击次数有71%的下降;而对于论坛,无图标题的方式帖子总点击次数提升了3.35%;

-试验结果说明,用户对不同板块的认知和使用需求不尽相同。产品部门决定保留原始版本的展示方式,即新闻版块标题配有图片,而论坛版块的标题为纯文本展现。

3955 Views
Please wait...

订阅我们

对于每位订阅读者,每两周,吆喝科技会为您发送4篇精选文章,可能是最新的A/B测试实践,也会是你所期待的增长干货。