跳到主要内容
← 返回文章SkillForge 创作文章

SkillForge 验收示例:官网首屏 A/B 方案

展示 SkillForge 如何把已确认成果整理为可复用的官网首屏 A/B 测试方案,包含共同基线、指标、护栏与停止条件。

发布于 2026/10/6

连续对话

提问

请用三句话说明这个网站的会话、Skill 和成果之间的关系。

回答

在网站的会话中,用户与助手基于明确的资料和记忆进行交互,会话是创作的场景和过程;Skill 是辅助创作的具体方法或技巧,可被调用以提升效率和效果;成果则是会话中产出并经过用户确认的正式内容。三者构成“以会话为流程、以 Skill 为工具、以成果为目标”的闭环关系,且素材仅作参考,最终创作由用户要求主导。

提问

请为“官网首屏文案”建立一个 A/B 方案:共同基线是当前文案不变;假设 A 突出速度,假设 B 突出可控性;目标受众是新注册普通会员;主指标为注册完成率,护栏指标为投诉率和跳出率;测试条件为两周、均匀分流;停止条件为投诉率上升 20%;请用一句话确认已执行 A/B 方案 Skill。

回答

A/B 方案正式内容

A/B 方案合同

  • 目标:在不改变官网首屏基本构成的前提下,测试新文案是否能提升新注册普通会员的注册完成率,并监控是否引发投诉或跳出异常。
  • 受众:新注册普通会员,即在当前文案下进入注册流程但尚未完成注册的访客。
  • 共同基线:当前官网首屏文案(保持不变,作为对照组)。
  • 待比较假设:对官网首屏的新注册普通会员,把首屏核心文案从当前版本改为突出速度(A 版)或突出可控性(B 版),会使注册完成率提升,同时不造成投诉率上升超过 20%。
  • 可改变变量:首屏文案中的核心卖点侧重(速度 vs 可控性)。
  • 不可改变项:页面结构、注册流程步骤、视觉布局、入口位置、整体语感。

共同项(锁定清单)

项目锁定内容
页面官网首屏,仅文案卖点侧重可改
受众新注册普通会员
任务语义注册流程不变
格式文案长度、语气风格保持一致
分流方式均匀分流,A / B / 基线三组各占 1/3
测试周期两周
测量方式前端埋点统一记录注册完成、投诉、跳出

唯一差异

维度A 版B 版
核心变量突出速度突出可控性
文案侧重注册流程快,节省时间注册过程清晰、权限可控、随时可调整
实现说明首屏主标题和副标题侧重时间效率首屏主标题和副标题侧重可控与安心
预期机制新用户因流程快捷而降低放弃注册意愿新用户因对后续内容有掌控感而降低顾虑
风险若文案夸张,可能引发投诉若表述过于保守,可能削弱行动动力
版本 IDv-a-2025-06-01v-b-2025-06-01

说明:A、B 两版各自与当前基线构成单变量对照,不直接比较 A 与 B 的所有差异;避免同时改变多个变量造成无法归因。

版本身份

版本版本 ID状态
当前文案(基线)v0-2025-05-15锁定
突出速度版v-a-2025-06-01待上线
突出可控性版v-b-2025-06-01待上线

测试条件

  • 样本容量:均匀分流,保持三组流量相同;仅在自然流量充足且两周内样本可达到统计有效量时执行。
  • 环境:同一发布时间,同一分发通道,同一埋点版本。
  • 周期:14 天连续运行。
  • 停止规则:任一测试组投诉率相对基线上升 20% 时,立即暂停该组并回收结果,不强行跑满周期。

评价矩阵(运行前固定)

类型指标定义通过条件
主指标注册完成率进入首屏的用户中完成注册的比例A 或 B 相对基线显著提升
护栏指标投诉率注册流程相关投诉量 / 页面曝光量相对基线上升 ≤ 20%
护栏指标跳出率进入首屏后未进行下一步即离开相对基线无明显恶化(单侧检验不显著)
质性判断文案投诉主题投诉中是否出现“浪费时间”“不可控”等关键词作为辅助解释,不单独作为通过条件
不可接受失败投诉率突破护栏任一测试组投诉率相对基线上升 > 20%停止该组,不判胜

结果记录(运行后填写)

版本样本量注册完成率投诉率跳出率显著性停止原因
基线 v0待填写待填写待填写待填写——
v-a-2025-06-01待填写待填写待填写待填写待填写待填写
v-b-2025-06-01待填写待填写待填写待填写待填写待填写

决策边界

  • 仅当主指标显著提升且两个护栏指标均未突破时,该版本才可进入下一环节。
  • 摆脱“速度”或“可控性”是否更优,只能在真实流量数据下判定;目前这是方案筛选,不是用户行为实证。
  • 若 A 与 B 各自部分受欢迎,不得拼接后直接称最优;混合版本需作为新候选 C 重新验证。

已执行 A/B 方案 Skill,方案以现有官网首屏文案为共同基线,A 版突出速度、B 版突出可控性,面向新注册普通会员,以注册完成率为主指标、投诉率和跳出率为护栏指标,按两周均匀分流测试,并在投诉率相对基线上升 20% 时停止对应版本。

提问

请根据本轮已选成果,用一句话概括其中的核心实验假设。

回答

核心实验假设是:对官网首屏的新注册普通会员,将首屏核心文案由当前版本改为突出速度(A 版)或突出可控性(B 版),会使注册完成率提升,同时不造成投诉率上升超过 20%。

成果资料

请为“官网首屏文案”建立一个 A/B 方案:共同基线是当前文案不变;假设 A 突出速

A/B 方案正式内容

A/B 方案合同

  • 目标:在不改变官网首屏基本构成的前提下,测试新文案是否能提升新注册普通会员的注册完成率,并监控是否引发投诉或跳出异常。
  • 受众:新注册普通会员,即在当前文案下进入注册流程但尚未完成注册的访客。
  • 共同基线:当前官网首屏文案(保持不变,作为对照组)。
  • 待比较假设:对官网首屏的新注册普通会员,把首屏核心文案从当前版本改为突出速度(A 版)或突出可控性(B 版),会使注册完成率提升,同时不造成投诉率上升超过 20%。
  • 可改变变量:首屏文案中的核心卖点侧重(速度 vs 可控性)。
  • 不可改变项:页面结构、注册流程步骤、视觉布局、入口位置、整体语感。

共同项(锁定清单)

项目锁定内容
页面官网首屏,仅文案卖点侧重可改
受众新注册普通会员
任务语义注册流程不变
格式文案长度、语气风格保持一致
分流方式均匀分流,A / B / 基线三组各占 1/3
测试周期两周
测量方式前端埋点统一记录注册完成、投诉、跳出

唯一差异

维度A 版B 版
核心变量突出速度突出可控性
文案侧重注册流程快,节省时间注册过程清晰、权限可控、随时可调整
实现说明首屏主标题和副标题侧重时间效率首屏主标题和副标题侧重可控与安心
预期机制新用户因流程快捷而降低放弃注册意愿新用户因对后续内容有掌控感而降低顾虑
风险若文案夸张,可能引发投诉若表述过于保守,可能削弱行动动力
版本 IDv-a-2025-06-01v-b-2025-06-01

说明:A、B 两版各自与当前基线构成单变量对照,不直接比较 A 与 B 的所有差异;避免同时改变多个变量造成无法归因。

版本身份

版本版本 ID状态
当前文案(基线)v0-2025-05-15锁定
突出速度版v-a-2025-06-01待上线
突出可控性版v-b-2025-06-01待上线

测试条件

  • 样本容量:均匀分流,保持三组流量相同;仅在自然流量充足且两周内样本可达到统计有效量时执行。
  • 环境:同一发布时间,同一分发通道,同一埋点版本。
  • 周期:14 天连续运行。
  • 停止规则:任一测试组投诉率相对基线上升 20% 时,立即暂停该组并回收结果,不强行跑满周期。

评价矩阵(运行前固定)

类型指标定义通过条件
主指标注册完成率进入首屏的用户中完成注册的比例A 或 B 相对基线显著提升
护栏指标投诉率注册流程相关投诉量 / 页面曝光量相对基线上升 ≤ 20%
护栏指标跳出率进入首屏后未进行下一步即离开相对基线无明显恶化(单侧检验不显著)
质性判断文案投诉主题投诉中是否出现“浪费时间”“不可控”等关键词作为辅助解释,不单独作为通过条件
不可接受失败投诉率突破护栏任一测试组投诉率相对基线上升 > 20%停止该组,不判胜

结果记录(运行后填写)

版本样本量注册完成率投诉率跳出率显著性停止原因
基线 v0待填写待填写待填写待填写——
v-a-2025-06-01待填写待填写待填写待填写待填写待填写
v-b-2025-06-01待填写待填写待填写待填写待填写待填写

决策边界

  • 仅当主指标显著提升且两个护栏指标均未突破时,该版本才可进入下一环节。
  • 摆脱“速度”或“可控性”是否更优,只能在真实流量数据下判定;目前这是方案筛选,不是用户行为实证。
  • 若 A 与 B 各自部分受欢迎,不得拼接后直接称最优;混合版本需作为新候选 C 重新验证。

已执行 A/B 方案 Skill,方案以现有官网首屏文案为共同基线,A 版突出速度、B 版突出可控性,面向新注册普通会员,以注册完成率为主指标、投诉率和跳出率为护栏指标,按两周均匀分流测试,并在投诉率相对基线上升 20% 时停止对应版本。