AB 实验结果分析的多重性
原文中文,约1200字,阅读约需3分钟。发表于: 。在公司工作,普遍采用了AB实验去验证某个 Feature 的效果,但是客户端或者前端工作而言,我们在做实验分析的时候还需要做更多的事情。 去年自己遇到一个 Case 便是如此。这里不太会透露很多业务的细则。 比如自己再做的的一个实验 A, 它在前端整体跑下来的结果是 显著 positive...
在公司工作时,进行AB实验验证Feature效果时,前端工作需要做更多事情。建议在实验结果Review时,关注Top5机型指标增长情况。前端工作的多重性容易导致疏漏,需要注意不同机型和系统版本的变化。保持数据敏感性很重要,不仅关注正向指标,也要留意负向指标。过去一年的经历让作者对数据驱动有更深的认识。