AI Skill 大全

A/B测试方案设计与结果评估

依据产品假设、基线指标与样本量规划A/B测试方案,并对实验结果进行统计与业务显著性解读。

功能与用途

本技能专为产品经理和增长团队设计,覆盖A/B测试全流程。输入业务假设、基线指标、最小可检测效应(MDE)及日样本量,即可输出包含单一核心指标、护栏指标、样本量与运行时长估算的严谨实验方案;在测试结束后输入实验数据,系统会评估统计与业务显著性,排查提前终止与分流偏差风险,给出上线、迭代或终止建议。

适用场景

  • 新功能A/B测试设计:为功能改版制定规范假设、单核心指标、护栏指标及所需样本量和周期。
  • 样本量与周期估算:根据基线转化率、目标提升幅度与日均流量,精确计算实验所需样本与天数。
  • 实验结果显著性评估:对比对照组与实验组数据,结合统计学p值与商业价值给出上线或放弃决策。

适用人群

  • 产品经理
  • 数据分析师
  • 增长黑客
  • 商业运营专家

使用步骤

  1. 提供实验假设、当前基线指标、期望提升幅度(MDE)及日均流量。
  2. 获取包含核心指标、护栏指标、样本量与预定成功阈值的实验设计方案。
  3. 实验运行结束后,输入对照组与实验组实际数据、p值与运行天数。
  4. 获取统计与业务显著性分析报告,以及上线、迭代或终止的具体建议。

开始使用

将需求和 Skill 名称发送给已连接 SkillPX MCP 的 AI 助手,核对适用工具和安装要求。

查看 MCP 接入说明

技术信息

分类
商业运营
适用工具
Codex、Claude Code、OpenClaw、Hermes Agent、国内 Agent
使用难度
进阶
版本
main
最近更新
2026-09-30
文件数
3
安装包大小
自动生成 ZIP
安全检查
基础检查通过

Design statistically rigorous A/B tests and interpret experiment results. Use when asked to design an experiment, run an A/B test, calculate sample size, interpret test results, or assess whether an experiment was successful. Produces a complete experiment design with hypothesis, sample size, run time, success criteria, and risk flags — or a results interpretation with ship/iterate/kill recommendation.

依赖与权限

  • REPORT

同类 Skill