ch5 数据应用
A/B测试
上个月刚好看过胖里分享巡山猫的AB测试公众号推文,两部分可以互相补充。
-
七个步骤建立A/B测试的闭环
-
第一步:A/B测试策略制定
使用ICE模型打分,E(effort)指实现上线测试的策略所需的成本。将三个所有备选策略,通过多人根据三个因子打分,选择分数最高的几个进行A/B测试。本书提供了ICE打分模型。
-
第二步:测试目标(评估指标)选择
选择最直接的指标,比如两个海报的点击率,当然,同时也要关注核心业务目标,比如,转化率
预估实验样本和试验周期:书中提供的样本计算器链接:https://www.abtasty.com/sample-size-calculator/
-
第三步:科学分流
此处要注意不同“桶”的人群特征是均匀分布的
-
第四步:A/A测试
一方面及时发现用户分流的问题;另一方面,排除用户属性干扰,确保实验差异仅由变量造成
-
第五步:策略投放
-
第六步:诗句监控
-
第七步:策略结果分析与执行
-
产品迭代
-
产品迭代8个步骤
- 产品需求收集、分析和评估
- 产品定义
- 交互和视觉设计
- 技术评审
- 研发
- 测试
- 上线
- 跟踪数据及总结
-
评估产品迭代效果
PULSE模型
- pageview – 页面浏