AppAdhoc A/B Testing客户案例

用A/B测试持续提升产品

传神首页呼单卡片样式优化

公司简介

小尾巴翻译官是由专业提供语言翻译服务的传神公司开发的一款在线翻译APP。不同于市面上其他的翻译类APP,小尾巴翻译官采用专人在线一对一的方式,帮助用户解决语言问题。目前支持11种语言的在线即时互译,用户只需选择好互译的语言,最多30秒就可以接通专业译员。它是基于全球的准入、服务体系的建立和用户需求的完善、译员的匹配等新形势下,完成的一个全新产品。除此之外,从物品的文字说明书,到与旅行中当地人的沟通,或是其他翻译书写的零散场景,都可以通过小尾巴翻译满足使用需求。

 

案例背景

用户在线呼叫人工翻译的转化和用户留存,是小尾巴翻译官的产品部门最为看重的关键业务指标。事实上,用户呼单次数的提升也就意味着用户留存的提升,因此,对用户呼单界面的优化成为产品迭代优化的第一步。

 

测试方案

AppAdhoc A/B Testing采用科学的试验流量分割,使得每一组试验对象具备一致的用户特征,并在试验过程中也可以随时调整用户流量,使企业可以在新版本上线之前,以最低成本观察客户对多个优化方案的数据反馈。同时,根据试验的数据发现用户反馈效果最好的版本,作为最终的新版本迭代方案。

产品部门设计了两款不同的呼单卡片设计方案,以此来对比哪个方案对用户使用更加友好。

%e7%89%88%e6%9c%ac%e5%af%b9%e6%af%94

原始版本:呼单卡片设计为“窗口标签”式;

试验版本:将呼单卡片样式更改为“icon点击”式,其余页面元素保持不变。

同时,将“文字翻译”、“图片翻译”、“语音翻译”的点击次数和实际成功率作为本次试验的核心优化指标。

 

测试目标

本次试验的主要目标是通过对比试验两种页面样式,找到更有助于提升用户呼单数量的设计方案,并优化用户体验。

 

A/B测试数据反馈

此次试验在嗨住小尾巴翻译的iOS端和安卓端进行,由于流量相对较少,累计运行了60天(一般来说,为了获得更加可信的数据结果,试验运行周期应至少保证1-2个完整的自然周)。在对试验数据进一步分析后,产品部门得到了科学可信的数据结果。

-从三种翻译的按钮点击率来说,试验版本不论在Android端还是iOS端都表现更好,而且提升幅度至少达到80%;

-然而对比实际成功的呼单转化率,两个版本却相差无几;

-产品负责人通过分析发现,试验版本的设计容易导致许多误点击,所以造成了转化率的虚假增长,下一步需要优化试验版本的设计方案后再进行测试。

2220 Views
即刻实践文章理论 A/B测试 灰度发布 产品优化 免费申请
Please wait...

订阅我们

对于每位订阅读者,每两周,吆喝科技会为您发送4篇精选文章,可能是最新的A/B测试实践,也会是你所期待的增长干货。