用对照组实验证明活动增量价值
Simon Ni · July 2026
用对照组实验量化每场活动的真实增量贡献
| # | 维度 | 指标 | 公式 | Target |
|---|---|---|---|---|
| KR1 | 规模 | Total Incremental Profit | Σ(活动组Revenue − 对照组Revenue) − Cost | [BI测算] |
| KR2 | 质量 | eFTD Incremental Lift % | (活动组eFTD率 − 对照组eFTD率) / 对照组eFTD率 × 100% | [BI测算] |
| KR3 | 效率 | Revenue / Cost | 活动组增量Revenue / 活动总成本 | [BI测算] |
| KR4 | EU | EU Site Campaign ROI | EU活动收入 / EU活动成本,QoQ↑ | [BI测算] |
| KR5 | 基建 | Holdout基建上线 | 分组+过滤系统上线日期 | Aug 31 |
KR1-4的Target数字需BI基于H1 actuals测算后提供
| 时间 | 里程碑 | Owner |
|---|---|---|
| Aug W1-2 | BI建分组逻辑 + 报名系统过滤 | BI + Product |
| Aug W3-4 | 用户分组完成 + 灰度测试 | BI + QA |
| Aug 31 | Holdout基建正式上线 | All |
| Sep W2 | 第一场Tier 1活动执行holdout | Campaign |
| Sep W4 | 首份Incremental Lift Report | BI + Simon |
| Dec | Q3全量复盘汇报 | Simon |
| Action | Owner | Deadline |
|---|---|---|
| BI测算KR1-4 target数字 | BI Lead | Aug 5 |
| Holdout分组PRD | BI Lead | Aug 8 |
| 报名系统改造排期 | Product | Aug 12 |
| EU ROI baseline确认 | Jack Team | Aug 15 |
| Holdout正式上线 | All | Aug 31 |