一、什么是AB测试
围绕目标制定两套方案,让用户群体分为对照组和实验组进行实验,并记录下实验结果,看哪个方案结果更符合制定的目标。
二、AB测试的关键点:
①样本测试数据不能过少,流量太少,则结果不具有可参考性,流量过多,会增加试错成本;
正确的做法应该是在实验开始之前,就预估所需的样本,并根据实际情况进行调整;
②确保样本数据的种类均分,不能是同一个类型的客户覆盖全部的样本;
例如:测试某个功能的转化率,样本不能全是大款或者全是中产阶级,这样测试的结果依然存在偏差;
三、实战案例
依据现有的测试数据,分析新旧落地页带来的转化效果对比。
数据链接:https://pan.baidu.com/s/1nHsYnSBw4slHcZzUsIiHrA
提取密码:mkxw
4 进行假设性检验
原假设:新落地页的转化率并不高于旧落地页
备择假设:与之相反,即新落地页的转化率更高