产品经理小课堂:看灰度测试如何帮助Duolingo获取2亿用户

孟小白·2017年08月25日 11:41
灰度测试不容易,尤其是当你有70个测试点子的时候。

语言学习平台Duolingo(中文:多邻国),在全球拥有2亿用户,是移动端语言学习app的鼻祖;36氪对其发布过多篇报道。公司负责用户增长的总裁Gina Gotthilf近日通过First Round Review分享了灰度测试帮助用户从300万到2亿的历程,本文分享2个例子。

推迟用户注册

Duolingo有段时间面临新注册用户数量大幅下降的问题,包括大量的用户下载并简单使用了app之后没有注册;而不注册就意味着Duolingo没法向用户提供长期稳定的有价值服务。团队提出了一个反直觉的假设:推迟注册邀请,让用户先使用产品。结果,尝试带来出人意料的效果,仅仅将注册页面移后几步,就将日活量提升了20%。 

接下来,团队认为注册页面的“放弃”选项过于显眼容易引导用户点击,所以将“放弃”改为了“稍后再说”,并将这些允许用户暂时忽略注册邀请、进而继续体验产品的页面称为“软墙”。Duolingo会设置多道“软墙”,当用户跳过几次之后,就会遇到“硬墙”,如果不注册就不能再继续使用产品了(如下图,左边为硬墙,右边为软墙)。

团队尝试了“软墙”设置时间和“软墙”数量各种组合的灰度测试后,确定下现在三面“软墙”的方案,它们都会被设置在用户明显感受到产品价值的时候。如果没有这些“软墙”,“硬墙”在获取客户方面的表现明显更糟糕;但“软硬墙”组合在一起,把日活提升了8.2%。 

保持连续记录

为了帮助用户将英语学习变成习惯,Duolingo参考游戏产业的做法:如果你不每天做点什么的话,你就会失去类似排位的东西;于是,团队邀请用户自己设定每天要在Duolingo上学习的时间。目标设定进而影响了通知推送的目的;不再是与用户无关的“Duolingo欢迎你回来”,而是“你设置了自己的计划,来达成今天的目标吧”。

接着,推送目的的改变引发了对推送时间和内容的灰度测试。在全天任何不合适的时间推送通知,都会变成惹人烦的信息。对全世界的用户测试后,团队发现没有统一的通知时间,更容易绑定用户的方式是在用户昨天使用app的时间通知他。通知内容方面,团队对比了不同风格的测试:展示用户今天要学习的单词、弹出可爱的卡通形象Duo、或者提出需要用户作答的一个小测试。最后测试证明,最有效的通知方式,是一条简单的“Hi,这是Duo”的信息;独自一条改变就将日活量提高5%。

但是,令团队没想到的是,丢失连续记录对用户造成了困扰。所以,团队测试“周末附身符”,用户可以使用连续记录换取积分、并在周五用积分购买“附身符”,以免自己周末时忘记练习而失去连续记录。帮助用户保持记录是留存用户的方式,因为一些用户一旦突然丧失连续记录就可能放弃使用Duolingo。灰度测试证明,“护身符”机制引入的7天后,日活增长2.1%;引入14天后,日活增长4%。

课堂总结

Gotthilf从这段帮助Duolingo增长用户的历程中学到最重要的东西是:一个测试会引出更多测试,不要放弃它们,同时对比几项测试,然后让数据说话。有些测试可能只有6行代码,有些则需要数周讨论,有些人喜欢大的改变,但是没有人最开始地会从“Hi,这是Duo”这条推送下手去提高日活;5%的提升是了不起的,尤其是当平台有上亿用户的时候。


+1
11

好文章,需要你的鼓励

参与评论
评论千万条,友善第一条
后参与讨论
提交评论0/1000

下一篇

据传闻称,iPhone 8的价格可能会从1000美元起步,这或许会让某些客户望而却步。在那些打算购买iPhone 8的受访者中,13%的人表示自己肯定会购买它,29%的人表示不确定,但他们同时也说自己可能还是会买。

2017-08-25

36氪APP让一部分人先看到未来
36氪
鲸准
氪空间

推送和解读前沿、有料的科技创投资讯

一级市场金融信息和系统服务提供商

聚焦全球优秀创业者,项目融资率接近97%,领跑行业