A/B测试方案设计与结果评估
依据产品假设、基线指标与样本量规划A/B测试方案,并对实验结果进行统计与业务显著性解读。
功能与用途
本技能专为产品经理和增长团队设计,覆盖A/B测试全流程。输入业务假设、基线指标、最小可检测效应(MDE)及日样本量,即可输出包含单一核心指标、护栏指标、样本量与运行时长估算的严谨实验方案;在测试结束后输入实验数据,系统会评估统计与业务显著性,排查提前终止与分流偏差风险,给出上线、迭代或终止建议。
适用场景
- 新功能A/B测试设计:为功能改版制定规范假设、单核心指标、护栏指标及所需样本量和周期。
- 样本量与周期估算:根据基线转化率、目标提升幅度与日均流量,精确计算实验所需样本与天数。
- 实验结果显著性评估:对比对照组与实验组数据,结合统计学p值与商业价值给出上线或放弃决策。
适用人群
- 产品经理
- 数据分析师
- 增长黑客
- 商业运营专家
使用步骤
- 提供实验假设、当前基线指标、期望提升幅度(MDE)及日均流量。
- 获取包含核心指标、护栏指标、样本量与预定成功阈值的实验设计方案。
- 实验运行结束后,输入对照组与实验组实际数据、p值与运行天数。
- 获取统计与业务显著性分析报告,以及上线、迭代或终止的具体建议。
开始使用
将需求和 Skill 名称发送给已连接 SkillPX MCP 的 AI 助手,核对适用工具和安装要求。
技术信息
- 分类
- 商业运营
- 适用工具
- Codex、Claude Code、OpenClaw、Hermes Agent、国内 Agent
- 使用难度
- 进阶
- 版本
- main
- 最近更新
- 2026-09-30
- 文件数
- 3
- 安装包大小
- 自动生成 ZIP
- 安全检查
- 基础检查通过
Design statistically rigorous A/B tests and interpret experiment results. Use when asked to design an experiment, run an A/B test, calculate sample size, interpret test results, or assess whether an experiment was successful. Produces a complete experiment design with hypothesis, sample size, run time, success criteria, and risk flags — or a results interpretation with ship/iterate/kill recommendation.
依赖与权限
- REPORT