板球交流群(产品增长案例：我们在imo上的A/B和踩过的坑)-趣拿体育

产物增长案例：我们在imo上的A/B和踩过的坑

本文经过对imo产物的分析。十分好地阐释了产物增长在实践利用中的使用。

经过“提出假定”->”验证ab数据”->”复盘”的不休快速迭代来进一步加深对产物和用户的了解。仅有如此做产物才干从实质上提高产物才能。不然就算做出了告捷的产物，也只是运气使然。渴望各位都能从这个案例中取得启示。

imo是一个10年的熟人通讯产物，面向中东、南亚、北非等新兴国度。

由于原团队的特别性，功效逻辑和界面视觉都比力大略且有一定的壅闭成绩。我们团队接办后，开头对imo app举行梳理改版，让其更符实用户心智、更具有扩展性，为日后转型作铺垫。

而改版和铺路所面临的最大挑唆就是“怎样做好当地化计划”。

仅仅经过阅读报告和短时出差，是无法深入了解新兴国度情况的，尤其是文明层面的。有些当地人才干get到的梗，我们是无法直接明白到的——就如是在国内

以前不但单代表“含笑”，又如是在东方文明“已读”是标配而在中国则是来自事情的不得已的压力……若非在当地长时生存，是无法一下子意会其弦外之音。

云云以来，过往国内的一些推断办法就无法直接使用——每个国度的经济与提高阶段不同，互联网的浸透情况大相径庭，用户市场情况也就不尽相反。在国内所总结的产物计划办法论，投放在印度与投放在印尼约莫会取得截然相反的后果。国内浩繁出海遇挫的案例报告我们，直接把国内的产物套路复刻到外洋，是行不通的。

imo新旧logo

App本身的汗青包袱，中外各国的宏大文明差别，再加上WhatsApp等竞品的步步紧逼……在三座大山的欺压之下，贸然的一次性大改版一定会招致用户不成逆的、血崩式的流失。

在这种情况下，ABtest是验证方案对否合适目标市场的最妥当而高效的办法。产物与计划团队拆解细分了功效界面（有的乃至细到控件颗粒度），以原方案为比力组来验证新方案的被承受水平。

以下主要分享ABtest项目标履历，包含ABtest的要点及我们碰到的坑，以此共鉴共勉。

「1」

ABtest的看法

1. 什么是A/Btest

使用不同的方案举行随机投放，以某些数据目标为标准，找出紧张变量。

寻常有由照组和实行组协同构成，可以验证新旧方案的差别，也可验证多个不同新方案的差别。

2. A/Btest的作用

验证不同方案的后果；
找到紧张变量，作为正向或负向兴奋因子，复用于相反条件的不同方案中。

3. A/Btest的实用情况

寻常而言，无法依据逻辑分析确定结论、不触及底层界说端正、非复合功效时，可使用ABtest投放到市场举行验证。

「2」

使用ABtest的稀有误区

1. 引入了多个变量

A/Btest是比力单个变量的多个版本的办法。经过测试受试者对变量A和B（致使C、D）的反响，来确定哪一个变量最好效。换言之，除了约莫影响用户举动的唯一变量之外，其他变量必需是相反的。

很多功效实行说是ABtest，但实践上，从功效逻辑到视觉样式都产生了厘革、引入了多个变量，招致无法准确筛查出惹起厘革的紧张变量。如此即使测试出了哪套方案数据更好，也无法定位出是哪个紧张变量招致的厘革。如此的实行组，结论仍旧是个黑盒，无法沉淀办法、复用到其他方案致使其他业务中，听从低下。

2. 触及毕竟层端正

一切的方案都可以经过ABtest来验证数据优劣，但并不是每一个功效都合适使用ABtest办法。

触及毕竟层端正界说的功效，就不宜使用ABtest。底层端正是天下观的构建，是产物的定位、是动身点，而ABtest则是对后果的挑选，若通事后果来支配缘故，那就犹豫致使丧失了产物本身的定位。

比如，Timeline和Story是两种典范的信息外形。以微信伙伴圈为例的Timeline，产物定位是纪录本人生存的相册，以是配套的方案是广场广播式的、优先兼容图片的、可沉淀的瀑布流；而Snapchat的Story，定位是与伙伴分享本人如今这一刻，以是配套的方案是以人聚合的、视频为主的、偶尔效性的房间。

方案是办事于产物定位的，若看到哪种产物抢手就生搬硬套其方案，即使带来了数据的昌盛恐怕也只是一时的，产物的中心定位是创建长时壁垒的根当地点。

微信-伙伴圈，Snapchat-Snaps (story)

3. 样本量不敷

多量一局部和少数一局部的举动存在严重差别，因此关于不同的功效，必要测试的样本量是不同的。

比如关于相对独立断绝的东西类功效而言，由于不太触及人与人之间的接洽，以是约莫数十人的样本量足以验证哪个变量听从最高；而关于交际功效而言，由于依托人与人之间的互动、互相浸透、交织影响，若没有一定的样本量（如万人级别），那么得出的实行后果约莫就不具有普适性、并不克不及代表一个群体。换言之，交际功效随着量级的扩大，约莫会显现不一样的后果。

互相独立的一局部与互相影响的轻重群体

4. 并不是单一数据决定优劣

有的产物是看单一目标，而有的产物则由多个目标互相影响。起首必要明白产物的中心定位是什么，再看方案对否能加强产物的中心定位，最初才是看方案对功效本身的影响。是有明白的主次干系在此中的。

比如东西产物，每个功效相对独立，寻常是以听从优先的——那么如今功效使用率越高越抱负。

又如交际产物，深入依托于干系链的广度与密度，那么就不克不及单看某个功效的使用情况了——比如说交际产物中的内容阅读功效，假定加强入口样式提高了该功效的进入率，但若因此而招致产物的消息发送量、通话人数次数等中心互动数据下降了，那么就可以说该方案负影响到了产物的中心目标，大概并不是一个切合的方案。

固然，事变并非非黑即白，若该方案对产物的全体留存有分明的正向作用，那么就必要进一步分析情况，比如对否持续加强该阅读功效，乃至约莫必要重新审视原本的产物定位。

目标定位→加强定位→方案本身

「3」

ABtest案例

下文会围绕“用户并不会只由于功效权重的提高而买单”和“所处的互联网水平大不相反”两个角度来先容我们在改版历程中碰到的坑。它们或证实白一些通用的计划准则，或见告了我们天下之大是云云不同。

「用户并不会由于功效权重的简便提高而买单」

在产物计划历程中，稀有业务方渴望经过提高权重来促进某些数字目标。这种办法，当发力点与产物定位一律、与使用场景吻适时，偶尔分很好效的；但更多时分，约莫是离开了场景、大概违反了动机，乃至阔别了定位，那么就会丢失功效。

1. 在线视频播放器

这是一个视频在线播放器，重点在于在线播放视频。

在线播放器对应的功效点包含：基本播放利用，如停息进度条等；调停帮助利用，如码率字幕调停等；共享利用，如分享下载等。具体功效的权重及逻辑不掀开细说，此处主要报告权重调停与对应的后果。

项目之初，由于业务方渴望经过在线看影戏拉来新增用户，特意强化了分享利用；别的由于不确定当地网络情况及用户对画面明晰度的容忍度，直接把码率设置项外露了（美其名曰把选择权交回给用户）。

旧方案：播放器，突出分享，外露设置项

颠末一个月的数据验证，发觉“强扭的瓜不甜”，用户并不会由于“外露”或“权重高”就去点击。具体情况如下：

分享利用

进入播放页面的人，20%点击了分享按钮，但真正转发射去仅有不到5%——基于猎奇而点击分享，而非真实动机（也便是碰瓷）。

有人约莫会说，能碰瓷一点是一点啊，1%的分享率也是量啊。是的，但即使有1%的人真的分享出去了，还得看能带归来回头的新增转化是几多。层层漏斗下去，无需多言自可意会。

在高权重地点增长一个无济于事的功效，成效不大却因提高了繁复度而影响其他更中心功效的使用，可谓捡了芝麻丢了西瓜。

码率切换

在视频的中心诉求是能“流利地看”，而调停明晰度是属于“分外帮助利用”。

关于这些帮助功效，最优解应当是完全不必要用户注意到它——依据网络情况主动切换码率。而在需求之初，由于武艺暂且还不支持依据主动切换码率，业务方就要求把码率切换放在分明提示的地点，缘故是“默许明晰度难以敲定，过低约莫招致看不清，过高约莫招致视频卡顿“，以是直接把选择权抛回给用户。（PS：这属于比力典范的本末颠倒案例，由于暂且不支持某项才能，而引入新的成绩。）

实践后果是：码率切换的点击率不到4%（并且这还没算上真正设置告捷的比例）。绝大局部用户只会依照默许码率看完视频……

把选择压力丢回给用户、把十分用的功效都堆砌在外，非但没有满意好视频播放本身，反而招致整个页面的信息过载，影响了中心利用的听从。这画面就像是，把一个充满了各式按钮的电视遥控器丢给老大娘，而她只是想掀开电视看个剧罢了。

功效一股脑往外堆砌=如此的遥控器

回归初始的计划思绪：

以用户使用场景为依据分列权重，只外露最基本功效，其他折叠。

基本功效（能看）：全屏、进度条、下载（由于印度网络的特别性，他们习气于下载资源再反复使用）；
帮助功效（看好）：帮助设置，如设置码率、字幕；
二次利用，如分享、媒体中央入口。

武艺层面的功效完成主动化，主动依据网络情况切换码率，而手动切换放在更深的入口内。

新方案：左图是播放器默许形态，右图是经过右上角入口调起帮助利用面板。

2. Story的拍摄入口

这是一个照相story（伙伴24小时内动态）的功效入口。

在旧版imo中，有照相入口位于首页导航栏正中央，推测动机是为了勉励用户现拍现分享动态。

旧版：首页导航上，重申照相分享功效

团结imo的定位，它是以及时通讯为主，而story只是帮助于伙伴间交换的异步功效。把拍摄入口安排在这么紧张的地点，仿佛与中心定位并不切合。

具体来说，成绩有三点：

1、从通讯东西的角度来看，优先勉励分享动态显然与通讯东西的定位不符；

2、一个照相入口安排于谈天列表底部，没有直接对应的使用场景，显得突兀；

3、关于imo用户、新兴国度的人而言，“现拍”更是一种门槛较高的表达办法。

基于上述缘故，我们决定去掉该拍摄入口，让首页更聚焦在通讯上，再者是缓解三层汉堡的成绩，为日后的功效拓展预留空间。

新版：把照相入口从首导航页去掉

上述的分析是基于逻辑推导的，而实践使用情况为了妥当起见，团队使用了ABtest的办法来验证。

我们把保存照相入口与去掉照相入口做了比力完成，后果发觉，去掉了首页导航的照相入口后，story全体的公布人数、次数并都没有分明下降，乃至连发抖都算不上；而原使用该入口的一小撮用户也很快地迁徙到了story内里去公布（story内的拍摄入口使用人数、次数均上增）。

由此再次证实：

用户并不会由于功效按钮身居要位或是扩大抢眼，就会真的使用该功效。离开了使用场景而孤单存在，只会是一个空壳，而没有太大的实践收益。

3. 署名信息的保存入口

这是一个编纂署名信息后的保存按钮。

功效本身很简便，就是编纂完天性署名的内容，点击保存即完成。

左图为原方案，保存按钮在右上角；

右图为实行方案，保存按钮扩大居中在底部。

在最初的方案，我们依照了全局一致的利用栏布局，把完成按钮安排在右上角。功效上线后，实践上的设置率是23%支配，不算特别抱负。厥后就开头分析缘故，先从最可控的变量动手——纯视觉层的保存按钮。

在实行方案中，我们把保存按钮加大、安排于编纂区下发，让其愈加夺目突出，并确保其不被键盘遮挡。

实行后果标明，两种方案的设置率不同几乎是没有的，实行方案设置率增长仅有0.1%。再加上量级较少，这个后果就跟发抖一样，几乎可忽略不计。在收益不分明的情况下，我们优先选择依照全局一致性（左图方案）。

此实行组再次证实：

功效的使用依托内在驱动力，单纯的把利用区加强、增大、增重，难以好效的改动意图。

「所处的互联网水平大不相反」

互联网产物的界面计划趋向，大抵上是由具象往笼统渐渐提高。从前的界面计划会经过模仿实际生存中的实体物品，来引导教导用户举行利用使用；厥后随着扁平化的显现，界面计划的风潮开头往更笼统、更极致的朝向演进，以聚焦目标提升听从。

图形界面的演化历程

关于颠末了十年、二十年洗礼的西欧和中国互联网民来说，这个历程的演化的可承受的、自但是然的。今天我们看到一个写着play的矩形，会条件反射般地晓得它是一个播放按钮。

但是关于新兴国度而言，大局部人是近几年才刚开头用上智能手机，乃至刚开头从按键机过渡到触屏机。这些笼统的计划元素对他们而言是难以了解的。写着“Play”字样的矩形在他们眼里，约莫就真的只是一个写着字的图形罢了。

1. 利用图形化

这是一个注册时的完成按钮。

左图为原方案，右图是实行方案

在接办imo时，原注册界面就是以“??”代表完成利用。

我们依照在国内做界面的思绪，会以为图形的表意不够准确、修饰性更大一些，于是在新实行方案中使用了“OK”文本举行代替。事先也有思索到了解才能的成绩，但“OK”是英语掩盖地区的通用单词，应该不至于形成困难。

但是，实践的数据报告我们，“??”方案的注册告捷率，就是要高于“OK”方案的。也就是说，在一切变量一样的情况下，图形化的利用按钮转化率更高。

此情况后续显如今种种功效的计划上，种种实行都证实图形化的利用，转化率会比纯文本的转化率更高。由此我们分析推测，图形化的利用指引更强，而纯文本照旧过于笼统，关于现在的用户来说，尚且未能被完全承受。

基于此结论，后续我们更新了相应的组件库，并增补了一条新的计划准则：尽力使用图形化的计划言语。

左图为原组件，纯文本利用；右图是新组件，图形化利用

2. 变小分析性文本

在任何产物的计划上，若想依托文本信息去表明分析功效，屡屡是本末倒置后果甚微。由于文本是信息高度紧缩的前言，比拟于图片、视频，笔墨的阅读必要泯灭更多的脑力去剖析。当笔墨作为帮助分析时，纯文本的被承受度、被吸取度也是最差的。别的，新兴国度用户的英语水平乱七八糟，广泛还没能将英语当作平常相反言语。当他们面临一串串英文文本时，只能经过一些琐屑单词去推测意思。

基于上述两点，就不难了解他们主动忽略分析文本的习气了。

两种典范的分析书，纯笔墨的是消费商自嗨的天书，

图例的是给用户看的分析书。

下图是我们之前测试过一个引导分享的弹窗，想要通太过享带来更多的新用户。

原本预期是点击分享的比例不会很高，毕竟是离开了场景僵硬切入的。实践的后果是：分享面板的被调起比例很高，但是调起分享面板后，真恰好效转化的分享量却是低到可忽略不计。——绝大局部用户乃至连看都不看就直接戳向“OK”，然后再关掉分享面板。

换言之，是有不少人点了OK（以关掉弹窗），但真正发给了伙伴的却没几一局部。

影戏播放历程中，显现分享引导的弹窗，为了分享拉新

3. 加强可利用性

这是一个群约请卡片，望文生义点击该卡片后可查察群信息，并到场此中。

左图为原方案，只突出中心信息；右图为实行方案，外露按钮

在最初，我们依照以往计划消息样式的思绪，直接把群提要信息安排在约请卡片内。动身点是只需把最中心信息展现出来，若用户感兴致天然会查察具体或到场。

直到几个月前我们到印度调研，偶尔间发觉有的用户（当地高中学生）有一个苦恼：伙伴给他先容了一个板球活动群，他也很想到场，但是不晓得怎样到场……他们实验了一些办法，乱打乱撞之间建了一堆讨论组，但就是没法到场到该群。