Skip to main content

购后 A/B 测试

A/B 测试(也称拆分测试)允许你在单个漏斗内对比一个购后 offer 的最多五个版本,以确定哪个表现更好。每个版本称为一个布局(布局 A、布局 B、布局 C、布局 D、布局 E)。流量会自动在所有生效布局之间平均分配,并分别跟踪各自的表现,帮你找出表现更好的版本。 通过测试 offer 的不同变体,你可以提高转化率、增加收入,并基于数据做出 upsell 策略决策。
A/B 测试让你手动将每个布局配置为一个完整的 offer,并让它们相互对比。如果你想定义单个变量(如折扣类型、倒计时时长、商品类型),并让 Aftersell 将它们组合成所有可能的布局组合进行测试,请改用多变量测试
A/B 测试仅适用于购后 upsell。感谢页 offer 目前不支持 A/B 测试。有关 checkout widget 的 A/B 测试,请参见 Checkout A/B 测试

可以测试的内容

你几乎可以测试购后 offer 的任何元素,包括:
  • **商品:**不同商品、单商品 offer 与多商品 offer 的对比,或 AI 推荐与指定商品的对比
  • **折扣:**不同的折扣力度或类型(百分比与固定金额)
  • **文案:**标题、描述和行动号召文字
  • **图片:**商品图片或场景照片
  • **紧迫感元素:**不同时长的倒计时
  • **数量:**默认数量 1 与 2(或更多)的对比
  • **Offer 设计:**不同的布局或视觉风格
为获得最佳效果,请一次只测试一个元素,这样才能清楚识别是什么带来了表现变化。如果你想定义多个变量并让 Aftersell 将它们组合成布局组合进行测试,请改用多变量测试

如何设置 A/B 测试

第 1 步:创建或打开漏斗

  1. 从 Shopify 后台打开 Aftersell 应用
  2. 在左侧边栏进入 Post-purchase Funnels
  3. 创建新漏斗,或打开你想测试的现有漏斗

第 2 步:创建测试

  1. 在漏斗中,点击 Create Test
  2. 在选项中选择 A/B Test

第 3 步:设置布局

将每个布局配置为一个完整的 offer。你最多可以创建 5 个布局(布局 A 到布局 E)。 对于每个布局,你可以自定义:
  • 商品选择
  • 折扣力度和类型
  • Offer 文案和信息
  • 图片和视觉元素
  • 倒计时设置
  • 默认数量
  • 其他任何 offer 设置

第 4 步:开始测试

  1. 检查所有布局,确保配置正确
  2. 点击 Start Test,开始在各布局之间分配流量
  3. 确保你的漏斗已启用发布
你的 A/B 测试现已上线。

流量如何分配

流量会自动在测试中的所有布局之间平均分配。无法手动调整每个布局的流量百分比。例如:
  • 如果有 2 个布局,流量按 50% / 50% 分配
  • 如果有 3 个布局,流量大约按 33% / 33% / 33% 分配
  • 如果有 4 个布局,流量按每个 25% 分配
  • 如果有 5 个布局,流量按每个 20% 分配
同一测试中的所有布局获得均等的流量分配。不能设置自定义百分比(例如,无法将布局 A 设为 80%、布局 B 设为 20%)。

管理测试

A/B 测试上线后,其状态会显示为 In progress。在此你可以暂停、编辑、重置、删除测试或选出获胜者。

测试状态

  • Not started:测试已创建但未生效。流量未在分配。如果你看到 100% 的流量流向某一个布局,请点击 Start test
  • In progress:流量正在所有布局之间平均分配。
  • Paused:流量分配已停止。
  • Finished:测试已完成。结果可在 Analytics > Tests 选项卡中查看。
将鼠标悬停在状态徽章上可查看日期提示。提示会显示:
  • Started [日期]——适用于进行中、已暂停或已完成的测试
  • Last reset [日期]——适用于尚未开始但已重置过分析数据的测试
  • Created [日期]——适用于尚未开始且从未重置过的测试

暂停测试

点击 Pause 可暂时停止流量分配。测试暂停时:
  • 流量不再在布局之间分配
  • 只会显示最先创建的布局(布局 A)
  • 暂停期间无法选择显示哪个布局
要永久显示其他布局,你必须选出获胜者或删除测试。取消暂停后,流量将恢复平均分配。

编辑测试

如需调整商品、定价、布局或文案,请使用三点菜单选择 Edit test。为保证结果准确,请避免在测试运行期间做重大改动。

重置分析数据

选择 Reset analytics 可清除当前测试数据并从零重新开始跟踪。此操作仅重置 A/B 测试数据。历史累计 offer 数据不会被删除。

删除测试

选择 Delete test 可永久删除该 A/B 测试。删除后:
  • 流量不再分配
  • Offer 恢复正常行为
  • 累计 offer 分析数据重新可见

选出获胜者

准备结束测试时:
  1. 点击 Select winner
  2. 选择要保留的布局
  3. 确认
这会结束测试,并将所选布局设为生效的 offer。此后所有顾客都将看到该布局。

A/B 测试分析的工作方式

测试运行后,你可以在 Aftersell 仪表盘 Analytics 部分的 Tests 选项卡中跟踪表现。 有关 Tests 选项卡所有指标的完整说明,包括分组级分析、按变量的表现(Performance by Variable)、所有分组表格(All Groups)以及如何选择测试,请参见购后分析

限制

A/B 测试仅限单个漏斗内

A/B 测试对比的是同一漏斗内的布局。无法将一个漏斗与另一个漏斗进行 A/B 测试。

A/B 测试仅适用于购后 upsell

感谢页 offer 目前不支持 A/B 测试。它仅支持购后 upsell 漏斗。

不支持自定义流量百分比

流量始终在所有生效布局之间平均分配。无法为单个布局指定自定义百分比。

A/B 测试最佳实践

让测试运行足够长的时间

  • **最短时长:**2–4 周
  • **最少展示次数:**每个布局至少 100–200 次展示(越多越好)
  • 时间过短的测试可能无法产生统计上可靠的结果,尤其是在流量较低时。
分析仪表盘会显示达到统计有效性所需的展示次数,帮你判断数据何时可以用于决策。

一次只测试一个元素

如果同时更改多个元素,你将无法知道是哪个改动带来了结果。一次测试一个变量,才能获得清晰的洞察: 推荐:测试 10% 折扣与 20% 折扣(一个变量) 避免:测试 10% 折扣 + 商品 A 与 20% 折扣 + 商品 B(两个变量)

关注表现的一致性

不要基于单一指标做决策。获胜布局应在多个指标上都表现良好:
  • 更高的转化率
  • 更高的每次访问收入
  • 相当或更高的平均 upsell 金额

考虑统计显著性

在宣布获胜者之前,请确保结果具有统计显著性。注意以下几点:
  • 明显的表现差异(而不仅仅是 1–2% 的波动)
  • 随时间保持一致的趋势
  • 足够的样本量(展示次数)

应用获胜布局

确定明确的获胜者后:
  1. 停止测试
  2. 将获胜布局应用到你的漏斗
  3. 监控表现,确保结果保持稳定
  4. 考虑运行新的测试以进一步优化

A/B 测试与多变量测试

不确定该用哪种测试方式? 在以下情况使用 A/B 测试:
  • 你想对比完整的 offer 配置
  • 你的流量水平中等
  • 你想要清晰直接的结果
在以下情况使用多变量测试:
  • 你想同时测试多个变量并找出最佳组合
  • 你的流量水平较高
  • 你想定义变量,并让 Aftersell 将它们组合成布局组合进行测试

常见 A/B 测试思路

需要灵感?以下是值得尝试的经过验证的 A/B 测试:

基于商品的测试

  • **同款商品与互补商品:**测试顾客更愿意加购刚购买的商品,还是尝试新商品
  • **单商品与多商品 offer:**将单件商品的 offer 与包含互补商品的多商品 offer 进行对比
  • **AI 推荐与固定商品:**测试动态 AI 推荐与手动选择的商品

折扣测试

  • **折扣力度:**测试 10% 折扣、20% 折扣与 30% 折扣
  • **折扣类型:**对比百分比折扣(八折)与固定金额(立减 $5)
  • **无折扣与有折扣:**测试你的受众是否真的需要折扣

数量测试

  • **默认数量:**测试数量 1 与数量 2(对消耗品尤其有效)

文案与信息测试

  • **标题变体:**测试不同的价值主张或信息角度
  • **紧迫感信息:**测试有无紧迫感措辞
  • **CTA 按钮文字:**测试不同的行动号召短语

设计测试

  • **长文案与短文案:**测试详细的商品描述与简洁的 offer
  • **图片变体:**测试不同的商品图片或场景照片
  • **倒计时时长:**测试 5 分钟、10 分钟与 15 分钟的倒计时
有关更详细的策略和示例,请查看我们的最佳实践指南。

常见问题

A/B 测试达到统计显著性后会自动停止吗?

不会。购后 A/B 测试会一直运行,直到你自己结束它——结果达到统计显著性时不会自动停止。分析仪表盘会显示达到统计有效结果所推荐的展示次数,但达到该数字不会停止测试或选出获胜者。何时认定数据已有结论并结束测试,由你决定。准备好后,通过 Select winner 结束测试(或暂停、删除测试)——参见管理测试

需要帮助?

如果你对设置或分析 A/B 测试有疑问,请使用应用右下角的在线聊天联系我们的支持团队。