创建、运行和停止 A/B 测试
本文介绍 Adapty 中 A/B 测试的完整生命周期:创建测试、运行测试,以及在准备好查看结果时停止测试。
前提条件
在设置 A/B 测试之前,你需要准备:
如果你没有使用 Adapty Flow builder 或 Adapty 付费墙编辑工具,请通过 .logShowPaywall() 将付费墙展示事件发送至 Adapty。若未调用该方法,Adapty 将无法统计测试中的付费墙展示次数,导致转化数据不准确。
Adapty 中的 A/B 测试分两步完成。你先创建测试并保存为草稿——不会立即上线。准备好后再单独运行。这样你可以在用户看到之前检查配置是否正确。
创建 A/B 测试
创建新的 A/B 测试时,至少需要包含两个流程/付费墙/用户引导。
创建新的 A/B 测试:
-
从 Adapty 主菜单进入 A/B tests。
-
在右上角,点击 Create A/B test。
-
在 Create the A/B test 窗口中,输入 Test name。此项为必填。请选择一个能清晰描述测试内容的名称,以便在查看结果时快速识别。
-
填写 Test goal,说明您希望达成的目标(例如提升订阅量或降低流失率)。
-
点击 Select placement,选择一个流程、付费墙或用户引导版位。
-
在 Variants 表格中配置测试内容。每一行代表一个实验变体,每一列代表一个版位。在每个交叉处添加一个付费墙。 默认情况下,表格包含 2 个实验变体和 1 个版位。你最多可以添加 20 个实验变体。添加第二个版位后,测试将变为跨版位 A/B 测试。请注意,跨版位 A/B 测试仅适用于付费墙。
-
保存测试。你有两种选择:
- Save as draft:测试不会立即上线。你可以稍后从版位或 A/B 测试列表中启动它。在正式启动前,可以用这个选项检查配置是否正确。
- Run A/B test:立即启动测试。点击该按钮后,测试将立刻上线。
保存为草稿后,继续参阅运行 A/B 测试。
编辑 A/B 测试
您只能编辑已保存为草稿的 A/B 测试。一旦测试生效,就无法更改。要更新正在运行的测试,请使用 Modify 选项——这会创建一个同名副本,您可以在其中进行更改。Adapty 会停止原始测试,原始版本和修改版本将分别出现在您的数据分析中。
运行 A/B 测试
在 Adapty 中运行 A/B 测试,意味着将其分配到某个版位,从而开始向用户展示付费墙和用户引导。
-
从 Adapty 主菜单进入 A/B tests 板块。
-
确认你正在查看正确的列表——Paywall、Flow、Onboardings 和 Crossplacement A/B 测试分别显示在不同标签页中,可以切换查看。
-
切换到 Drafts 标签页。只有草稿状态的测试才能启动。
-
在您要启动的测试旁边,点击 Run A/B test。
-
编辑 A/B 测试窗口随即打开。请检查配置,并在此时完成最终调整。如果版位或目标受众尚未填写,请在此添加。
-
确认配置无误后,点击 Run A/B test 开始运行。 测试启动后,你可以在 A/B 测试结果与数据图表 页面跟踪测试进度并查看性能数据。
停止 A/B 测试
停止 A/B 测试后,测试将结束,你可以查看结果。同时,你还需要决定测试结束后在相关版位中向用户展示哪个付费墙。
-
打开 A/B tests 页面,切换到 Live 标签页。
-
在要停止的测试旁边,点击三点菜单,然后选择 Stop A/B test。
-
在 Stop the A/B test 窗口中,决定测试结束后的处理方式。你有三个选项: | 选项 | 描述 | |----------------------------------------------------------------|---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------| | 展示某个已测试的付费墙/用户引导 | 根据收入、最优概率(P2BB)和每千用户收入等测试结果,选择胜出的付费墙或用户引导。所选版位和目标受众将展示该付费墙或用户引导。 | | 选择不参与 A/B 测试的付费墙/用户引导 | 选择任意不属于当前 A/B 测试的付费墙或用户引导。当所有测试实验变体均未达到预期目标时,可使用此选项。 | | 不指定任何付费墙/用户引导 | A/B 测试结束后,所选版位和目标受众不会指定特定的付费墙或用户引导,而是根据目标受众优先级展示下一个可用的付费墙或用户引导。如果您希望由现有配置自动决定展示哪个付费墙或用户引导,而无需手动选择,这是一个不错的选择。 |
停止 A/B 测试是不可逆操作——测试一旦停止便无法重新启动。请确保在决定停止之前已收集了足够的数据。
- 点击 Stop and complete this A/B test 按钮。
A/B 测试结束后,它将不再处于活跃状态,其中的付费墙或用户引导也不再向新用户展示。 您仍可在 A/B 测试数据图表页面查看测试结果与数据图表,了解测试期间参与用户的表现。随着新的购买或收入事件归因到这些用户,数据图表可能会持续更新。