Title: 典型案例
Locale: zh
URL: https://sensorswave.com/docs/experiments/use-cases/
Description: 通过真实案例学习实验设计和实施
通过真实的业务案例，学习如何设计、实施和分析 A/B 实验。本文提供 4 个典型案例，涵盖电商、推荐、定价和营销等场景。

## 案例 1：电商结账流程优化

### 背景

某电商平台的结账流程包含 5 个步骤：

1. 购物车确认
2. 填写收货地址
3. 选择配送方式
4. 选择支付方式
5. 确认订单

数据显示，每个步骤都有用户流失，整体支付转化率只有 18%，低于行业平均水平的 25%。

### 假设

简化结账流程，将 5 步合并为 3 步，能将支付转化率从 18% 提升到 22%（相对提升 22%）。

### 实验设计

**对照组**：
- 5 步结账流程（当前方案）
- 步骤：购物车 → 地址 → 配送 → 支付 → 确认

**实验组**：
- 3 步结账流程（简化方案）
- 步骤：购物车 → 地址+配送+支付 → 确认
- 将地址、配送和支付方式合并到一个页面

**流量分配**：50% vs 50%

**实验周期**：3 周

### 关键指标

**主要指标**：
- 支付转化率（购物车 → 支付成功）

**次要指标**：
- 平均结账时长
- 各步骤流失率
- 平均订单金额

**保护指标**：
- 总收入
- 支付成功率
- 用户投诉率

### 实验结果

| 指标 | 对照组 | 实验组 | 提升幅度 | p-value |
|------|--------|--------|---------|---------|
| 支付转化率 | 18.0% | 22.5% | +25.0% | 0.001 |
| 平均结账时长 | 4.5 分钟 | 3.2 分钟 | -28.9% | 0.003 |
| 购物车 → 地址步骤流失 | 25% | 15% | -40.0% | 0.002 |
| 平均订单金额 | ¥285 | ¥290 | +1.8% | 0.15 |
| 总收入 | - | - | +27.3% | 0.001 |

### 结论

**成功**：实验组的支付转化率提升 25%，超过预期的 22%，且具有统计显著性（p = 0.001  价格降幅）。

### 实验设计

这是一个**多变体实验**，对比 3 个价格点：

| 变体 | 价格 | 流量 |
|------|------|------|
| 对照组 | ¥299 | 34% |
| 实验组 A | ¥249 | 33% |
| 实验组 B | ¥199 | 33% |

**实验周期**：4 周

### 关键指标

**主要指标**：
- 购买转化率
- 总收入（转化率 × 价格）

**次要指标**：
- 用户生命周期价值（LTV）
- 复购率

**保护指标**：
- 用户满意度
- 流失率
- 品牌认知（价格过低可能影响品牌形象）

### 实验结果

| 指标 | 对照组（¥299） | 实验组 A（¥249） | 实验组 B（¥199） |
|------|---------------|-----------------|-----------------|
| 曝光用户数 | 3,400 | 3,300 | 3,300 |
| 购买用户数 | 170 | 231 | 330 |
| 购买转化率 | 5.0% | 7.0% | 10.0% |
| 转化率提升 | - | +40% | +100% |
| 总收入 | ¥50,830 | ¥57,719 | ¥65,670 |
| 总收入提升 | - | +13.5% | +29.2% |
| p-value（转化率） | - | 0.003 | < 0.001 |

### 分析

**转化率对比**：
- ¥249：转化率提升 40%，总收入提升 13.5%
- ¥199：转化率提升 100%，总收入提升 29.2%

**长期价值（LTV）分析**（6 个月后）：

| 指标 | ¥299 | ¥249 | ¥199 |
|------|------|------|------|
| 首次购买转化率 | 5.0% | 7.0% | 10.0% |
| 续费率 | 60% | 58% | 52% |
| 2 年 LTV | ¥359 | ¥289 | ¥207 |

### 结论

**短期成功，但长期需谨慎**：

- **短期**：¥199 定价的总收入最高（+29.2%），转化率最高（10%）
- **长期**：¥199 定价的续费率较低（52% vs 60%），2 年 LTV 最低（¥207 vs ¥359）
- **综合考虑**：¥249 是较优选择，转化率显著提升（+40%），总收入增加（+13.5%），且续费率影响较小（58% vs 60%）

### 行动

1. 采用 ¥249 定价，推广到全量用户
2. 监控续费率和用户满意度
3. 设计会员权益提升方案，提高续费率

---

## 案例 4：营销文案优化

### 背景

某电商平台在首页展示 Banner，当前文案为"新品上市"，点击率为 2.5%，低于预期。

### 假设

强调"限时优惠"的紧迫感能提升 Banner 点击率至少 30%（从 2.5% 提升到 3.25%）。

### 实验设计

**对照组**：
```
标题：新品上市
副标题：精选好物等你来挑
按钮：立即查看
```

**实验组**：
```
标题：限时优惠
副标题：全场 8 折，仅限今日
按钮：马上抢购
```

**流量分配**：50% vs 50%

**实验周期**：1 周

### 关键指标

**主要指标**：
- Banner 点击率

**次要指标**：
- 落地页停留时长
- 加购转化率
- 购买转化率

**保护指标**：
- 用户投诉率（避免"标题党"）
- 退货率

### 实验结果

| 指标 | 对照组 | 实验组 | 提升幅度 | p-value |
|------|--------|--------|---------|---------|
| Banner 曝光用户数 | 50,000 | 50,000 | - | - |
| Banner 点击用户数 | 1,250 | 1,875 | +50% | < 0.001 |
| Banner 点击率 | 2.5% | 3.75% | +50% | < 0.001 |
| 落地页停留时长 | 35 秒 | 42 秒 | +20% | 0.015 |
| 加购转化率 | 8% | 10% | +25% | 0.008 |
| 购买转化率 | 3% | 3.8% | +26.7% | 0.01 |
| 用户投诉率 | 0.1% | 0.15% | +50% | 0.25 |

### 结论

**成功**：实验组的 Banner 点击率提升 50%，超过预期的 30%，且具有统计显著性。落地页停留时长、加购转化率和购买转化率都有显著提升。虽然用户投诉率略有上升（0.15% vs 0.1%），但差异不显著（p = 0.25），且绝对值仍然很低，在可接受范围内。

### 行动

1. 推广"限时优惠"文案到全量用户
2. 确保优惠活动真实有效，避免虚假宣传
3. 定期更新文案，保持新鲜感
4. 测试其他文案方向（如"包邮"、"满减"）

---

## 案例总结

### 成功要素

通过以上案例，我们总结出成功实验的关键要素：

1. **明确的假设**：基于数据和洞察，提出可验证的假设
2. **合理的指标**：选择与业务目标直接相关的主要指标
3. **充足的样本量**：确保每组至少 1000 用户，运行至少 1 周
4. **全局观察**：关注次要指标和保护指标，避免"虚荣指标"
5. **长期思考**：考虑长期效果（如 LTV、续费率），而非只看短期指标

### 常见陷阱

1. **过早结束**：案例 1 运行 3 周，案例 2 运行 4 周，确保样本量充足
2. **忽视保护指标**：案例 2 关注算法延迟，案例 3 关注续费率和 LTV
3. **单一指标**：所有案例都观察了次要指标和保护指标
4. **短期思维**：案例 3 分析了长期 LTV，而非只看短期转化率

---

## 相关文档

- [实验设计](experiment-design.mdx)：学习如何设计科学的实验
- [指标与分析](metrics-and-analysis.mdx)：学习如何分析实验结果
- [最佳实践](best-practices.mdx)：掌握实验设计和执行的最佳实践

---

**最后更新时间**：2026 年 1 月 29 日