Agent Skill 设计与创意

A/B测试

当用户需要规划、设计或实施A/B测试/实验,或构建增长实验项目时使用。适用于用户提及“A/B测试”、“拆分测试”、“实验”、“测试此变更”、“变体文案”、“多变量测试”、“假设”、“是否应测试此内容”等场景。

查看 GitHub 仓库 ↗ ⭐ 44,722 Stars
  1. 📌Skill基础信息
  • Skill名称:ab-testing(A/B测试设计)
  • 来源:社区第三方(sickn33/agentic-awesome-skills)
  • 运行宿主:需明确具体Agent工具(原始文件未注明,推测为兼容Claude或类GPT Agent)
  • 核心定位:帮助开发者科学设计A/B测试方案,覆盖假设构建、样本计算、变体设计到结果分析的完整实验生命周期,适用于增长实验项目。
  1. 🧩内部核心组成
  • 核心能力模块

- 假设框架(结构化模板)

- 样本量计算工具(含快速参考表)

- 测试类型选择指南(A/B、A/B/n、MVT)

- 指标分层体系(主指标/辅助指标/防护指标)

- 实验程序管理(ICE优先级评分、实验循环模板)

  • 关键工具/模板
组件功能简述
样本量计算器基于基线转化率和预期提升计算所需流量
测试模板记录假设、变体、结果的标准化文档
ICE评分通过Impact/Confidence/Ease量化优先级
  1. 🛠安装与启用方式
  • 安装命令skills install --user sickn33/agentic-awesome-skills
  • 前置依赖:需确保Agent环境支持社区Skill加载机制
  • 上下文要求:优先读取.agents/product-marketing.md等营销上下文文件
  1. 📋标准工作流
  2. 需求触发:用户提及"A/B test"等关键词时激活
  3. 上下文检查:自动读取现有营销上下文文件
  4. 关键参数收集:通过问答获取当前转化率、流量等基线数据
  5. 假设构建:引导用户完成结构化假设声明
  6. 方案设计:协同确定测试类型、样本量、变体方案
  7. 实施验证:提供实施检查清单(如跟踪验证、QA)
  8. 结果分析:基于统计显著性标准输出结论矩阵
  1. ⚠️关键限制、缺陷、注意事项
  • 平台限制:依赖宿主Agent的社区插件支持能力
  • 统计风险:需人工验证样本量计算的业务合理性
  • 实施耦合:不包含具体代码实现,需配合PostHog等工具使用
  • 生产建议:适合方案设计阶段,实际部署需结合工程化验证
  • 典型坑点

- 早期结果窥探(Peeking Problem)易导致误判

- 多变量测试需极高流量,中小企业慎用

  1. ✅适用场景 & ❌不适合场景
  • ✅ 适用

- 增长团队设计转化率优化实验

- 需要结构化记录实验历史的项目

- 具备基础流量(单日UV>1k)的Web产品

  • ❌ 不适用

- 超低频交易场景(如B2B大额销售)

- 无明确量化指标的主观体验测试

- 流量不足的早期创业产品(需日均UV>500)

如何安装

skills install --user sickn33/agentic-awesome-skills

通用安装教程:在哪里输入上面的命令

上面的命令本质是在「终端 / 命令行」中调用技能管理器,把该 Skill 下载并注册到你的 AI 工具。各主流工具打开终端的位置不同,按下面操作即可:

  1. 打开工具自带的终端面板,或系统终端(macOS「终端」、Windows「PowerShell」、Linux「Terminal」)。
  2. 把上面的安装命令复制进去,回车运行,等待下载与注册完成。
  3. 重启或重新加载 AI 工具,让新安装的 Skill 被识别。
  4. 新建对话并触发:直接描述用途,或通过该工具的技能 / 斜杠菜单选中此 Skill。
Claude 桌面版(macOS / Windows)

桌面版没有内置命令行,Skill 需通过 Claude Code CLI 安装。打开系统终端,先执行 npm install -g @anthropic-ai/claude-code,再运行上面的安装命令;完成后完全退出并重新打开 Claude。

Claude Code(终端 CLI)

直接在项目目录的终端里运行上面的命令即可。也可先输入 claude 启动交互界面,再在对话中引用该 Skill(/ 斜杠菜单或直接描述用途)。

VS Code(含 GitHub Copilot)

打开终端面板:菜单「终端 → 新建终端」,或快捷键 Ctrl+`(macOS 为 ⌃+`)。在终端里运行上面的命令;装完后执行「重新加载窗口」(Ctrl+Shift+P → Reload Window),让 Copilot 等扩展识别新技能。

Cursor

底部「终端」面板(Ctrl+`)即是内置终端。粘贴运行上面的命令,完成后在命令面板执行「Reload Window」刷新,再开始对话。

Windsurf

底部「终端」面板运行命令;也可直接使用其内置 Agent 终端,在对话侧执行安装。

其他工具(ChatGPT、本地脚本等)

不支持本地终端的产品,可先在本机终端完成安装,再在对话中描述该 Skill 的能力让其调用;不同工具的命令格式请以其官方文档为准。

风险提示

✅ 低风险

自动扫描未发现高危命令、隐私抓取或数据外传行为。仍建议安装前快速浏览仓库代码。

相似 Skill 推荐

花叔设计
alchaincyf/huashu-design
中风险

花叔Design——用HTML做高保真原型、幻灯片、动画、可视化与专家评审。任何新设计100%先出三个方向初稿给用户选(指定风格/品牌也不豁免),选定后才执行。触发词:做原型、PPT、幻灯片、动画、设计风格、评审、做个H

cdxgen
cdxgen/cdxgen
中风险

从源代码和容器镜像为您的项目创建CycloneDX物料清单(BOM)。支持多种语言和包管理器。可集成到CI/CD流程中,自动提交至Dependency Track服务器。

FSE实验设计
brycewang-stanford/Awesome-Journal-Skills
低风险

用于设计或评审ESEC/FSE实证评估,涵盖真实主体系统、公平基准、SE标准统计与效应量、定性与混合方法严谨性、污染感知的LLM消融实验、挖掘研究的可追溯性,以及证据与软件工程主张形态的匹配。

Gemini技能
WJZ-P/gemini-skill
低风险

通过Gemini官网(gemini.google.com)执行图像生成、对话等操作。当用户提及“生图/画图/绘图/nano banana/nanobanana/生成图片”等关键词时触发。操作优先级分为三级:首选MCP工具