对AB测试效果的剖析可分为统计剖析和营业剖析两个方面。。。。。。。。

1、统计剖析

统计剖析，，，，，，，，所谓的统计剖析就是从统计的角度来剖析是否可信。。。。。。。。

分为三个条理：一是剖析AB两个版本之间的差别水平，，，，，，，，以统计上的显著性反应出来，，，，，，，，然后再剖析差别大�。。。。。。。。�，，，，，，，这里用刷新的效果来体现，，，，，，，，即转化率的增添或镌汰的幅度；；；；；；；最后是差别区间，，，，，，，，体现转化率刷新的空间规模。。。。。。。。

统计学上有意义：

统计学上的显著性也称为显著性，，，，，，，，是指两组间态度上的差别是由制度因素而非无意因素的影响，，，，，，，，同时假定影响差别的其他影响因素是我们所推论的因素，，，，，，，，但这一点也不是100%包管，，，，，，，，以是会有一个概率值，，，，，，，，即显着的水平。。。。。。。。

如前所述，，，，，，，，统计显著性的值体现以下寄义：

1)凌驾95%：优化版本与原始版本之间保存显著的统计差别，，，，，，，，转换率“改善”是可信的；；；；；；；

2)90%~95%：优化版本与原始版本之间的统计差别保存疑问，，，，，，，，转换率的「改善」是有疑问的；；；；；；；

3)低于90%：优化版本与原始版本之间没有显著的统计差别，，，，，，，，转换率的“改善”是不可信的；；；；；；；

改善效果：

优化后的AB测试版本比原来的版本提高了几多。。。。。。。。盘算公式为：(优化版本转换率-原始版本转换)/原始版本的转化率。。。。。。。。

差别规模：

即优化后的AB测试版本和原始版本间转换率差别最可能漫衍的区间。。。。。。。。好比：A版是原版，，，，，，，，B版是优化版，，，，，，，，A版是10%,B版是15%,B版是5%，，，，，，，，两者的绝对差值是5%，，，，，，，，而转换率的相对差值是50%。。。。。。。。

2、营业剖析

经由上述统计剖析确定可信度后，，，，，，，，需要对AB测试效果举行商业剖析。。。。。。。。由于统计剖析获得的是差别性因素，，，，，，，，在行业知识、主顾心理、用户行为习惯、偏好等方面进一步举行剖析，，，，，，，，从数据的统计中挖掘出真正爆发差别的缘故原由。。。。。。。。