AI Skill 大全

A/B测试数据分析与推全评估

输入A/B测试样本量与转化数据,自动进行统计显著性检验与护栏指标复核,输出包含明确推全或中止建议的决策报告。

功能与用途

用于产品与增长团队在实验结束后科学评估分流效果。用户只需提供实验假设、分流周期、对照组与实验组的样本量及转化数据(或原始表格),技能会自动校验样本量充分性与比率偏差,计算相对提升率、p值及置信区间,并综合评估护栏指标受损情况,最终给出全量上线、延长观察、立即中止或深入排查的标准化决策报告。

适用场景

  • 改版功能推全决策:评估新版本核心指标提升与护栏指标波动,明确判断是否全量发布或回滚。
  • 营销落地页转化验证:对比落地页多版本的点击转化率,利用统计检验排除偶发波动与假阳性。
  • 实验样本失衡排查:核验分流样本量是否达标,排查是否存在样本比率失衡(SRM)与新奇效应。

适用人群

  • 产品经理
  • 增长黑客
  • 数据分析师
  • 电商运营专员

使用步骤

  1. 输入实验假设、周期及两组的样本量与转化数据(或上传数据文件)。
  2. 系统核验样本量充分度、周期完整性及分流比例失衡风险。
  3. 自动执行双尾假设检验,计算相对提升幅度、p值与置信区间。
  4. 综合对比护栏指标,生成包含推全、延长或终止建议的决策报告。

开始使用

将需求和 Skill 名称发送给已连接 SkillPX MCP 的 AI 助手,核对适用工具和安装要求。

查看 MCP 接入说明

技术信息

分类
商业运营
适用工具
Codex、Claude Code、OpenClaw、Hermes Agent、国内 Agent
使用难度
进阶
版本
main
最近更新
2026-09-29
文件数
3
安装包大小
自动生成 ZIP
安全检查
基础检查通过

Analyze A/B test results with statistical significance, sample size validation, confidence intervals, and ship/extend/stop recommendations. Use when evaluating experiment results, checking if a test reached significance, interpreting split test data, or deciding whether to ship a variant.

同类 Skill