Claude Code ab-test-setup 技能:设计可判断结果的单变量 A/B 实验
EnglishClaude Code 安装步骤
- 从固定版本 GitHub 工作副本获取完整的 `cli-tool/components/skills/business-marketing/ab-test-setup` 目录。
- 将目录放入目标项目的 `.claude/skills/`,确认 `.claude/skills/ab-test-setup/SKILL.md` 存在,再从项目根目录启动 Claude Code 并输入 `/ab-test-setup`。
中文摘要
把页面改动写成假设、对照组和实验组,再预先确定主指标、样本条件和停止规则。适合减少实验中途更换指标或提前判断的问题。
SKILL.md 中文导读
可复现示例
为虚构的课程下载页比较两个按钮文案。现有下载完成率为 8%,希望能判断绝对提升 2 个百分点。请设计只改变按钮文案的实验。工作步骤
- 把假设写成具体页面变化和可观察的转化行为。
- 对齐分流单位、样本规模、主指标和保护指标,约定数据检查时间。
验收方法
方案应定义按访客分组、下载完成率作为主指标、预期检测差异及样本估算所需假设。记录错误率等保护指标,并给出预定停止规则。
GitHub 原文 · 更新日期
适用环境
Claude Code 和固定版本技能目录。准备当前转化率、可用流量、最小可接受变化及事件定义。
常见问题
为什么不能一看到实验组领先就结束?
短期波动可能造成领先。提前设定分析方法、样本量和停止条件,按约定规则判断结果。