非 A/B 测试的增长实验:
许多增长实验使用 A/B 测试以外的方法,例如:
测试前/后(测量变更前后的性能)
群组比较(比较不同用户群组的行为)
市场测试(不同地理市场的测试方法)
分阶段推出(逐步实施变更并衡量影响)
如果这些方法有明确的假设、明确的成功指标和重大的潜在影响,菲律宾电报数据 那么它们仍然是实验——只是它们不使用 A/B 测试的特定方法。
如何决定使用哪种方法
使用这个综合框架来确定某件事应该是增长实验、优化还是 A/B 测试:
步骤 1:评估变化幅度
首先,评估一下变化有多显著:
高度变化:
彻底重新设计或重组
新特性或功能
不同的商业模式或定价结构
新的受众群体或市场
基本信息或定位的转变
高强度的变化通常需要实验框架,因为它们具有不确定性和潜在影响。
中等幅度的变化:
对现有内容进行重大修改
现有功能的新变体
对既定流程的调整
扩展现有战略
中等程度的变化可能是实验或优化,取决于风险和潜在影响等其他因素。
頁:
[1]