词映 AI导航
工具库Skills 技能
我的收藏
词映 AI导航

ChatGPT ab-test-plan 技能：设计 A/B 实验指标和决策条件

English

ChatGPT 安装步骤

  1. 在支持创建技能的 ChatGPT 工作区打开「插件 → 技能 → 创建 → 使用编辑器创建」。
  2. 对照固定版本 GitHub 原文，在编辑器新建技能，将 `ab-test-plan` 的纯文本工作流程改写为技能说明。
  3. 保存后，在新对话输入 @ 并选中刚创建的技能，再用示例试用。

中文摘要

根据基线、目标、分流和统计输入组织实验设计，写明主指标、护栏指标与结束后的判断条件。

SKILL.md 中文导读

可复现示例

手动选择 ab-test-plan，用下方虚构数据设计阅读列表按钮文案实验。
experiment `Reading list label` | control `Save` | variant `Save for later`
primary `completed saves` | guardrail `median page time`
baseline `20%` | target `24%` | allocation `50/50` | alpha `0.05` | power `0.80` | guardrail threshold `100 ms`
no daily eligible traffic estimate supplied

工作步骤

  1. 记录对照和变体、改动假设及统计输入。
  2. 确定主指标、护栏指标和判断条件。
  3. 核对样本量输入与流量，记录计算和待定时长。

验收方法

主指标写 `completed saves`，对比 `Save` 和 `Save for later`。护栏采用 `median page time` 的 `100 ms` 允许变化上限。样本量记录计算方法与输入，缺少日流量时将持续时间标为待定。

GitHub 原文 · 更新日期

适用环境

支持创建技能的 ChatGPT 工作区。示例仅使用下方已给出的纯文本材料。

常见问题

有基线和目标，能直接写实验天数吗？

先用设计参数估算每组样本量，再根据符合条件的每日流量计算持续时间。缺少该流量就保留待定。

相关指南

相关推荐