近日,微信订阅号将采用信息流设计的一则消息刷爆了新媒体运营圈,今天,以微信订阅号的改版为例,诸葛君跟大家谈谈产品改版评估这件事。

将传统的折叠方式变为更为直不雅观的feed流模式
一、改版评估的重要性
大多数产品经理对改版评估这件事都比较头疼,要么粗略评估,要么直接扔给运营或数据部门出数据,通常也都只是对比一下新版本的用户增长情况,对比一下新旧版本活跃、留存的影响。要知道,每一次改版都是产品和用户的一次重新认识,改版如果是正向的,可能会带来增长,如果带来的是不增不减还好,可怕的是因为一次改版带来用户体验和信任的降低,造成流失,而这样的案例也太多太多。
所以,对于产品经理来说,上线一个新版虽已身心疲惫,但用数据量化你的成果也是重中之重。评估其实很简单,掌握了方法,用户数据说话,没准以后就可以站着改需求了。
二、如何进行评估
1、明确改版初衷
不是每次都适合看新增、留存、活跃这些统计指标,正确评估的第一步是回到产品设计的初衷,因为每次改版必然是有目的的:优化了购买路径必然是想提升购买转化率,优化了某一页面的设计必然是想提升当前页面的用户体验,体验的提升带来的可以使用户在当前页停留时长的增加,可以是当前页面核心功能点击人数次数的增加,或是社群中核心用户的几句正向反馈。
所以,从改版目的出发,每一次改版都是可以衡量的。我们以微信订阅号信息流的改版为例:
(可能的)改版初衷:
解决目前订阅号被严重折叠,,粉丝图文页打开率低的现状
改版内容:
—— 提升“内容”的显示等级(新版: 1 级;旧版: 2 级);
—— 优化用户从列表到文章详情的路径(新版: 1 步;旧版: 2 步;)
(可能的)改版目的:
—— 提升订阅号入口的打开率
—— 提升原图文的打开率
—— 提升平均每个用户每天在图文页查看公众号的个数
2、明确评估指标
基于改版目的,我们需要提前明确评估指标,通常一次正向改版会带来多项指标的提升,此次评估我们以 3 个最直接的指标来衡量:
指标1:订阅号入口打开率
说明:无论是路径进行了优化,还是界面进行了优化,都会带来用户对这一功能整体好感的提升,必然程度上会提升这一入口的打开率;
指标2:原图文打开率
说明:更多的信息在列表页得以展示,从列表到详情实现了路径最短,用户在订阅号功能模块下的使用效率提升,每一次打开能看的文章数也会增加;
指标3:平均每个用户在图文页查看公众号的个数
说明:同指标 2 的解释,更多的文章得以曝光,也就意味着更多的内容创作者得以曝光。
3、设置实验组和对照组
我们以指标 1 为例,当明确了评估指标,首先是要对当前现状有所量化,这样改版后才能形成对比。
对照组:
通常我们会筛选旧版本一段时间的新增用户,这一段时间可能流量平稳、没有大面积推广、没有全民热点事件,评估这段时间新用户使用这一功能的人数、次数、活跃比(活跃比:当天活跃的人中打开这一功能的百分比),我们假设微信的新增较少,在每一天的活跃都是存量用户,新增活跃几乎可以忽略,而且每一天活跃的用户类型都比较平均。然后查看这一人群在这一段时间的打开率。

对照组
实验组:
新功能上线以后通常会带来用户的一阵新鲜感,基于对照组中我们对微信新增较少而将样本筛选为活跃用户的假设,导致我们需要在上线之后用户讨论热度过后再来衡量,时间跨度和条件与对照组相同。然后对比这一入口在这一段时间的使用人数、次数、活跃比的变革。

实验组
对特定人群的分析也是改版评估非常重要的方法,也即衡量功能对特定人群的影响,可以基于用户环境信息、用户属性维度,甚至用户生命周期去对比。指标2、指标 3 逻辑类似,由于数据了解有限,我们只对分析思维进行阐述。
4、得出结论
得出结论的过程是直接影响我们定义他正向与否的关键,对数据的解读也是重中之重,不能缺少的是明确出我们对样本数据的假设条件。
5、持续验证
相关文章:
广告推广平台有哪些?目前最主流的是这9类平台!
点击率怎么赚钱的?点击广告赚钱的平台都有哪些?
亚马逊CPC广告投放你不得不知的几个知识点!
微信朋友圈广告如何投放?如果要推广怎么收费?
这样发布网站外链才能帮助我们更好的提升收录和排名!
如何找到一个收益好又靠谱的日付广告联盟?
2020年最快一天挣300500元的4个方法,收好了!
如何利用广告联盟推广产品广告来赚钱获取收益?
业余时间做什么网络兼职项目赚钱比较好?
网站引流怎么做?8个有效增加网站流量的技巧
百度广告联盟怎么赚钱?百度广告联盟点击一次多少钱?
一般人通过|直播|赚钱该怎么做吗?|直播|赚钱的四大方式!
做知乎引流的四个好处,难怪这么多人都在做!
竞价广告该如何投放,有什么技巧可借鉴的?
一个合格的网络淘金者必备的四种技能!
广告投放花钱也要花得值,效果才是花钱投广告的目的!
app推广怎么通过网盟推广来引流获客?
利用热门电影日引流1000+的方法,学会了引流不再是问题!
百度广告联盟赚钱靠谱吗?投放广告的效果怎么样?
联盟营销是什么意思?最早的联盟营销平台是哪个你知道吗?
站长联盟的盈利模式都有哪些?个人网站赚钱的三大方法!
新手应该怎样通过广告联盟赚钱?
推广类app的广告联盟,和其他的广告联盟相比有何优势?
国外广告联盟常见的五大收款方式,你知道几个?
搜狗联盟广告价钱点击一次超7元?对,你没有眼花!
怎样才能做好微信营销?26个微信营销技巧和方法请收好!
怎么申请加入谷歌广告联盟赚钱?
新手如何加入淘客联盟以及怎么赚取淘客联盟佣金?
十大实用且有效的网站赚钱常见方法!你知道几个?
个人网站赚钱该怎么做?
做好微信seo快速引流精准流量的6个方法
9个简单有效的微信引流方法,天天涨粉1000+你也可以!
联盟行业未来想要持续健康发展该如何去做?
利用今日头条快速引流精准用户的5个方法
微信朋友圈广告的主要推广方法有哪些?
教你如何通过发红包就可以赚钱的网赚项目操作思路!
2个超级暴利非常赚钱的网络淘金项目操作思路分享!
网站外链应该怎么发布?发布网站外链的4个最实用有效的方法!
日赚500的项目都有哪些?这里推荐你做这2个!
为什么网站的原创文章收录了但是无排名?主要是这几个原因!
【收藏】22种比较有效的网站外链建设渠道和方法
新手如何通过在日付广告联盟上做推广赚钱?
百度知道引流技巧,简单、粗暴、直接吸粉!
介绍两个利用业余时间轻松月入3000+的副业赚钱项目
日付广告联盟哪个好,如何判断哪个更靠谱?
app长期运营推广的5个全网覆盖、精细化运营思路!
【收藏】2021年引流之全面且细致的引流步骤分析总结
知乎引流应该怎么做?有什么需要注意的呢?
无法彻底屏蔽清除的弹窗广告,竟然可以给我们带来这么多“好”处!
cpc广告和cpm广告是什么意思?应该怎么做?


