第1章：明确A/B测试核心目标——理解假设验证的边界、区分因果推断与相关分析、建立业务决策流程

适用场景

本章适用于以下场景：

• 团队首次引入A/B测试，需要厘清“为什么做A/B测试”和“能回答什么问题”。
• 业务方混淆了“相关关系”与“因果关系”，导致决策依赖自然流量分析而非实验。
• 分析报告中出现大量“涨跌归因”，但未经过随机化对照验证，需要建立验证边界。
• 从“看数据”向“做实验”转型的初期，需要统一对假设验证流程的认知。

前置条件

• 理解基本统计概念：均值、方差、置信区间（可参考第2章基础回顾）。
• 已确定业务核心指标（如转化率、留存率、收入），但尚未明确因果归属。
• 团队具备实验平台或至少能实现随机分配用户的工具。
• 决策层认可将“相关性分析”与“因果推断”分开对待的原则。

操作步骤

1. 界定假设类型：将业务假设拆分为“干预→结果”的因果关系表述，并与纯关联性描述区分。
2. 识别验证边界：明确哪些假设适合用A/B测试验证（可随机化、可控制、有合理样本量），哪些只能使用观察性方法。
3. 区分因果推断与相关分析：对比两者的前提条件、输出结论类型、混淆因素处理方式。
4. 构建业务决策流程：绘制从“业务问题→假设形成→实验设计→数据收集→因果结论→决策”的闭环。
5. 记录验证声明：用标准模板记录假设、预期效应、成功标准，作为实验启动的输入。

输入输出物

责任边界

• 数据分析师/科学团队：主导假设梳理、验证边界判断、因果性评估方法选择。
• 产品经理：提供具体业务假设和预期结果，参与“是否值得实验”决策。
• 决策层：依据因果结论进行资源调配，不因相关性趋势直接叫停或上线策略。
• 工程团队：确保随机化分配和指标采集无偏（仅需确认，不参与本章核心分析）。

记录材料

本章需完成以下记录材料并归档：

• 《假设验证边界检查清单》——包含随机化可行性、样本量、执行周期、外部因素可控性等。
• 《因果 vs 相关对照表》——对常见分析场景给出“适用方法”建议。
• 《业务决策流程图（v1.0）》——标注每个决策点的输入、输出、责任人。

异常处理

验收标准

• 概念验收：团队可以清晰解释“为什么A/B测试能回答因果问题，而自然分析只能回答相关”。
• 产出验收：已完成假设验证边界检查清单、因果vs相关对照表、业务决策流程图的初版，且至少被2名团队成员审阅通过。
• 流程验收：随机选取3个业务假设，能根据边界判断正确区分“可实验”与“不可实验”。
• 记录验收：所有记录材料存入团队知识库，并设置下章节启动前的评审 gate。