芥末堆芥末堆

产品经理小课堂:看灰度测试如何帮助Duolingo获取2亿用户

作者:孟小白 发布时间:

产品经理小课堂:看灰度测试如何帮助Duolingo获取2亿用户

作者:孟小白 发布时间:

摘要:灰度测试不容易,尤其是当你有70个测试点子的时候。

mbb09xl4htzij91f.PNG!1200.jpg

语言学习平台Duolingo(中文:多邻国),在全球拥有2亿用户,是移动端语言学习app的鼻祖;36氪对其发布过多篇报道。公司负责用户增长的总裁Gina Gotthilf近日通过First Round Review分享了灰度测试帮助用户从300万到2亿的历程,本文分享2个例子。

推迟用户注册

Duolingo有段时间面临新注册用户数量大幅下降的问题,包括大量的用户下载并简单使用了app之后没有注册;而不注册就意味着Duolingo没法向用户提供长期稳定的有价值服务。团队提出了一个反直觉的假设:推迟注册邀请,让用户先使用产品。结果,尝试带来出人意料的效果,仅仅将注册页面移后几步,就将日活量提升了20%。 

接下来,团队认为注册页面的“放弃”选项过于显眼容易引导用户点击,所以将“放弃”改为了“稍后再说”,并将这些允许用户暂时忽略注册邀请、进而继续体验产品的页面称为“软墙”。Duolingo会设置多道“软墙”,当用户跳过几次之后,就会遇到“硬墙”,如果不注册就不能再继续使用产品了(如下图,左边为硬墙,右边为软墙)。

sr2r5ey4vdigluzh.jpg!1200.jpg团队尝试了“软墙”设置时间和“软墙”数量各种组合的灰度测试后,确定下现在三面“软墙”的方案,它们都会被设置在用户明显感受到产品价值的时候。如果没有这些“软墙”,“硬墙”在获取客户方面的表现明显更糟糕;但“软硬墙”组合在一起,把日活提升了8.2%。 

保持连续记录

为了帮助用户将英语学习变成习惯,Duolingo参考游戏产业的做法:如果你不每天做点什么的话,你就会失去类似排位的东西;于是,团队邀请用户自己设定每天要在Duolingo上学习的时间。目标设定进而影响了通知推送的目的;不再是与用户无关的“Duolingo欢迎你回来”,而是“你设置了自己的计划,来达成今天的目标吧”。

接着,推送目的的改变引发了对推送时间和内容的灰度测试。在全天任何不合适的时间推送通知,都会变成惹人烦的信息。对全世界的用户测试后,团队发现没有统一的通知时间,更容易绑定用户的方式是在用户昨天使用app的时间通知他。通知内容方面,团队对比了不同风格的测试:展示用户今天要学习的单词、弹出可爱的卡通形象Duo、或者提出需要用户作答的一个小测试。最后测试证明,最有效的通知方式,是一条简单的“Hi,这是Duo”的信息;独自一条改变就将日活量提高5%。

但是,令团队没想到的是,丢失连续记录对用户造成了困扰。所以,团队测试“周末附身符”,用户可以使用连续记录换取积分、并在周五用积分购买“附身符”,以免自己周末时忘记练习而失去连续记录。帮助用户保持记录是留存用户的方式,因为一些用户一旦突然丧失连续记录就可能放弃使用Duolingo。灰度测试证明,“护身符”机制引入的7天后,日活增长2.1%;引入14天后,日活增长4%。

课堂总结

Gotthilf从这段帮助Duolingo增长用户的历程中学到最重要的东西是:一个测试会引出更多测试,不要放弃它们,同时对比几项测试,然后让数据说话。有些测试可能只有6行代码,有些则需要数周讨论,有些人喜欢大的改变,但是没有人最开始地会从“Hi,这是Duo”这条推送下手去提高日活;5%的提升是了不起的,尤其是当平台有上亿用户的时候。

本文转自36氪,作者孟小白。

1、本文是 芥末堆网转载文章,原文:36氪
2、芥末堆不接受通过公关费、车马费等任何形式发布失实文章,只呈现有价值的内容给读者;
3、如果你也从事教育,并希望被芥末堆报道,请您 填写信息告诉我们。
来源:36氪
芥末堆商务合作:王老师 18710003484
  • 产品经理小课堂:看灰度测试如何帮助Duolingo获取2亿用户分享二维码