测试数据分析与产品迭代测试64课件.pptxVIP

;PM的主要工作是定义产品、跟踪研发、面向用户发布产品，并按照「设计→开发→发布」的过程不断循环往复。在这个循环过程中如果缺少「衡量」的反馈环节，常常会导致产品迭代效果无法达到预期。那么，如何高效评估迭代效果，减少试错成本呢？产品迭代后，如何进行数据效果评估？

现在数据评估，比较适合用户大流量、共性化特征比较明显的C端的产品经理。;三个常见的评估指标

产品迭代之后，具体可以从以下三个方面来进行分析：

改版后，新功能是否受欢迎，即功能渗透率；

改版后，对流程转化是否有提升，即转化率；

改版后，对产品整体留存的影响，即留存率；

1.1新功能是否受欢迎

要衡量一个新功能是否受欢迎，基本就看这个功能上线后，使用的人数多不多。当然，其中也涉及到运营推广的因素。

一个比较好的衡量指标就是功能渗透率。;功能渗透率=新功能的用户数/同期活跃用户数。比如说新功能的用户数是1,000人，而同时期产品的整体活跃用户数是10,000人，那么这个功能的渗透率就是10%。

当然，一个功能会被多少人使用，除了功能本身之外，还有很多因素影响，比如该功能在某一个产品流程的必经的环节中，或是在首页一个位置“极佳”的地方；无论用户是否喜欢或者需要，功能一般会有一个不错的数据表现。

所以，我们不能只根据功能渗透率来判断新功能的好坏，还是需要其他维度的数据多角度进行评估，才能更科学地进行评判产品迭代的效果。

;1.2对流程转化率是否有提升

我们还可以通过判断整个产品的流程转化率是否有变化，来判断产品迭代改版的效果。比如某互联网金融类产品中登录流程，其路径是：进入登录页面→输入手机号→输入手机验证码→完成登录。

我们把每个路径的人数都记录下来。原则上来说，流程设计的越来越复杂，人就会流失的越多，所以，我们可以根据这一路径，画出来一个人数的漏斗图。所以，我们可以用漏斗转化率来观察产品迭代的效果。

如果产品可以优化登录页面或简化登录信息填写，那么就可以很好地通过漏斗来看出，改版之前和改版之后，这个流程中每个小环节的漏斗转化率发生了什么变化，???样，我们就能比较准确地评估出产品迭代对流程转化率是否有提升作用。;1.3对产品整体留存的影响

一个好的功能是能够产生用户粘性的，因为体验流畅会让用户更加频繁地使用产品。所以，我们在迭代产品的功能之后，可以好好观察一下产品的整体留存率是否产生了变化，比如次日留存、周留存、月留存等指标，这些数据是否朝着更好的方向发展。

例如某产品改版后，新增“签到”功能，为了评估“签到”功能对产品整体留存的影响，可以分别查看使用“签到”功能后的用户留存率和整体留存率，再把这两个数据进行比较。;功能迭代一般分为两类情景，第一类增加新功能；第二类是迭代原有功能。进行功能迭代时，我们首先会有一个目标，如导流、拉新、优化用户体验。在选择评估指标的过程中，这两类情景考虑的问题会有所不同。

对于第一类「增加新功能」，在评估时需考虑：

新功能的预期效果是什么；

需要在哪些地方埋点来收集数据；

如何通过收集到的数据来评价本次迭代是否达到了预期的效果；

通过分析数据，新功能有哪些地方还需要再做优化；;对于第二类「迭代原有功能」，在评估时更多是要考虑：

这次功能完善是针对什么问题进行调整的；

需要和之前版本中的哪些数据进行对比；

数据发生了什么样的变化能够说明我们这次的调整是符合预期的；比如为了解决某个页面的流失率，对功能做了优化和调整，那么对于调整后的版本，这个页面的流失率是不是明显降低；

数据的变化是因为功能的调整引起的还是另有原因；

当然，这两类情景还需要考虑产品整体数据指标是否达到优化，如用户整体的活跃度、转化率和总体的留存情况。;无论是情景一还是情景二，数据指标的类型整体分为：

直接指标：与改版内容直接相关的指标，如活跃用户量、功能渗透率、转化率等；

间接指标：除功能外，还应注意用户体验，如用户满意度等指标，可以间接地帮助解读改版效果；

在指标数量的选取上，尽量为2个及以上，方便不同的指标相互佐证，提高结论的可信度。;三个常见的评估指标

产品迭代之后，具体可以从以下三个方面来进行分析：

改版后，新功能是否受欢迎，即功能渗透率；

改版后，对流程转化是否有提升，即转化率；

改版后，对产品整体留存的影响，即留存率；

1.1新功能是否受欢迎

要衡量一个新功能是否受欢迎，基本就看这个功能上线后，使用的人数多不多。当然，其中也涉及到运营推广的因素。

一个比较好的衡量指标就是功能渗透率。;还需注意的事情;一个新产品测试，用户也普遍反应喜欢新产品，但是反馈最多只能是定性反馈，那是否可以做一个定量的测试来证明新产品确实能够提升用户的满意度和效率。

方法是用户测试。首先要确定的是用户是谁，第一组是新用户用两代产品的对比，第二组是新老用户同样用新产品的对比。具体方法就是让新用