V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

爱意满满的作品展示区。

这是一个创建于 2638 天前的主题，其中的信息可能已经有所发展或是发生改变。

不知道这边做 product analytics 的同学多不多，最近总结了之前数据分析的经验，但感觉写得很水。。。。希望这里的朋友可以指点一下。。。。

目标读者：涉及产品数据的新人（ PM、数据分析师、产品运营）

对于涉及产品数据的新人（ PM、数据分析师、产品运营），常有这样的问题

怎么使用 Mixpanel/神策 /GrowingIO 等数据分析工具？
怎么定义产品的指标 (metrics)，并进一步进行分析？

所以，我们以自己的产品文图 ( http://wentu.io/) 为例，分享一下相关的经验、思考，希望能对大家有所帮助。

1. 产品与 Metrics 定义

(1) 文图是什么？

文图是一款用来做数据报告的产品

比如，你写了一篇数据分析报告，然后希望看起来比较专业（排版、颜色），那么可以用文图，因为有设计好的样式。另一方面，也有富交互的数据体验，图表、表格中的数据都是可交互的。

(2) 怎么定义产品指标(metrics)？

最常用的是 AARRR 模型 [1]

其核心是留存 /活跃用户，也就是希望用户能再次访问（ e.g. 微信, 微博）

然而，AARRR 并不适合所有产品

一个简单的例子是，Airbnb 的留存肯定也很低，因为没有人会每天去订房间。文图也是类似，没有人会每天去写报告，可能一个月一篇就不错了。因此，短期留存的意义不大, 留存 /活跃用户更大程度上是产品好坏的最终反应，而非直接需要提升的指标。

所以，我们用 HEART 模型来定义 metrics [2]

具体而言，是从产品本身的目的入手，更为本质。

文图的核心功能是文档制作，因此核心指标定义成制作文档的数量。同样的, airbnb 的核心指标之一是订床的数量, 而不是每天的活跃用户有多少。

不过，这只是从 “制作者” 的角度出发。对于运营人员、analyst 等制作者来说来说, 他们最终的目的是希望 “读者” 能方便的阅读文档，了解数据和分析结果，因而文图才会有移动端阅读、多文档合并等功能。而且制作者和读者本身的审美也不一致，只有保证读者满意，制作者才会长期的使用下去。不过遗憾的是，这方面的很难有较好的指标进行衡量。

总的 metrics 包括

(1) 基本状况

注册用户数
活跃用户数

(2) 业务指标

文档制作者: 创建文档 -> 编辑文档 -> 发布、下载
文档读者: 暂缺.

(2) 增长指标

aquisition 转化率: 访问 -> 注册按钮-> 注册成功
activiation 转化率: 注册成功 -> 创建文档 -> 编辑文档

2. 实现

设计好了 metrics，怎么具体得到这些数据呢？

我们用神策（类似 Mixpanel, 高级版的 Google Analytics ），包括基本的 dashboard 和更复杂的事件分析

上图是我们的 dashboard, 包括注册用户、文档创建等指标，每天用来了解产品的基本使用情况。

在代码实现上，用户做了相应的操作，就用 js 把相应的数据传输到后台进行记录（埋点），之后就可以用神策进行分析了。

可以用神策来做一些基本的分析，比如

文档完成漏斗

可以用漏斗模型看文档制作中各个步骤的转化率（创建 -> 编辑 -> 下载 /发布）

而完成文档的用户数，就是我们产品的核心用户群

这个也放在了 dashboard 中，可以看到，每周都会有 100-200 名用户在文图上完成了文档制作

注册成功 /失败比例

对用户注册的行为做了记录（分成成功和失败），就能看到产品注册成功 /失败的曲线

文档类型比例

文图的文档有多种类型，包括单页-PPT-打印文档 3 种，这 3 种各占比例多少呢？就我们内部使用而言，其实大部分都是使用单页文档。但从实际用户的使用数据中，发现创建 PPT 比我们预想的多多了

3. 案例：怎么衡量模板的好坏？

文图的核心功能之一，是用户可以使用模板（下图）创建文档。这些模板都是经过设计的，比单纯的 Excel + Word 来的要更好看。但是，我们自己对模板的设计并不满意，觉得一些模板并不好看，而且，也常有用户说某个模板颜色对比不够等等

怎么分析这个问题？

可以从文档完成率考虑 —— 用户创建文档后，经过一系列的操作，最终完成文档（发布、下载）。期间，有没有可能因为模板的不足（ e.g. 颜色对比不够），而放弃呢？

各模板的创建量、完成量和完成率（完成率=完成量 /创建量）如下

可以看到

默认模板(blue)创建量明显高于其他模板，说明数据基本准确
完成率和创建量相当不同，创建最多的并不是完成率最高的，而一些小众模板（ pure ）的完成率不错，说明计算基本上有效。而且这个顺序和我们主观的感知也大致相符。

仔细观察完成率最后几位 (my_red, my_blue, my_green)，可以发现一个共同点，都带有 header. 这和部分用户的反馈相同，“自己写了个文档，结果头上顶个别人家的 header, 心里不是滋味 ”

而很有意思的是，blue 和 my_blue 的关系，

这两个模板大体相同，只是后者带了 header，而完成率就有了一定的区别。考虑到 blue 作为默认的模板本身会有大量的试用，其实际完成率要更高，因此可以说，单单加上这个 header，文档的完成率就会往下掉 15% (17% -> 14%) 。而移除掉这些 header, 文档完成的数量就能有提升。

排在前面的模板，也是实际反馈中比较受欢迎的模板

总之，通过完成率，可以发现模板设计的好坏对文档完成有较大影响。假如把所有模板的设计水平都提升到第一的水准（ 17% -> 25%），是接近 50%的提升。于是，把这些分析结果告诉设计师，他们也就更有动力做之后的改进了，而不是简简单单的说“把模板设计更好看一点”。