AB测试实战直播 实战直播:召唤语优化试验 总结: (2017年10月24日,今天19大闭幕) 本次试验统计显著性没能达到95%,原因看似流量不足,样本数不够,但是,仔细想一下,如果改进的幅度大一些,比如原始版本转化率6%,优化版本转化率达到9%(… 阅读详细内容......
AB测试通用特性 怎样分析AB测试结果? AB测试结果分析包括统计学分析和业务分析两个部分。 统计学分析 统计学分析是为了确定AB测试结果在统计学角度是否可信。分析时我们首先关注A、B版本对用户行为的影响是否有差别,这通过统计显著性来反映。确定有… 阅读详细内容......
AB测试通用特性 什么是统计显著性? 在做AB测试时,我们会有一个担心,转化率的改变真的是源于优化版本上的修改吗?虽然可以看到优化版本转化率与原始版本转化率是不同的,但我们不能判定这是由随机误差引起,还是两者真的有实质上的不同。 统计显著性… 阅读详细内容......