A/B 测试结果与数据图表

通过 A/B 测试,对比不同付费墙和用户引导的表现,深入了解其对用户行为、参与度和转化率的影响,从而获取关键数据与洞察。结合这里的数据图表和测试结果,你可以做出更明智的决策,提升应用整体表现。深入挖掘数据,找到切实可行的优化方向,助力应用取得更好的成绩。

A/B 测试结果

以下是 Adapty 为 A/B 测试结果提供的三项数据图表:

ab-test-results.png

收入:该数据图表显示所有购买和续订产生的美元总收入,已扣除退款。包含首次购买和后续订阅续订的收入。通过收入指标,你可以了解每个 A/B 测试实验体的财务表现,找出哪个变体带来的收益最高。

了解更多关于付费墙用户引导数据图表的信息。 最优概率:Adapty 采用严谨的数学分析框架对 A/B 测试结果进行分析,并提供一项名为”最优概率”的数据指标。该指标衡量某个特定实验变体在所有参与测试的变体中,长期收益表现最佳的可能性,以 1% 至 100% 的百分比表示。如需了解 Adapty 计算该指标的详细方法,请参阅相关文档。按每千用户收益排名最高的实验变体会以绿色高亮显示,并自动设为默认选项。 每千用户收入:每千用户收入数据图表用于计算每个 A/B 测试实验变体平均每 1,000 名用户所产生的收入。该指标帮助你了解各实验变体的收入效率,而不受用户总量的影响。你可以在标准化的维度上比较不同实验变体的表现,并根据收入产生效率做出更明智的决策。 每千用户收入的趋势预测区间:每千用户收入数据图表同样包含趋势预测区间。这些趋势预测区间表示在现有数据和统计分析的基础上,特定实验变体的每千用户真实收入预计落入的范围。 在 A/B 测试中,分析不同实验变体产生的收入时,我们会计算每个实验变体每 1,000 名用户的平均收入。由于不同用户的收入存在差异,预测区间能够直观地反映每 1,000 名用户收入的合理取值范围,同时兼顾预测过程中的变异性与不确定性。 通过将预测区间纳入每千用户收入指标,Adapty 让你能够在考虑潜在收益范围的同时,评估 A/B 测试各实验变体的收益效率。这些信息有助于你在决策时充分考虑预测过程中的不确定性以及每千用户收入的合理取值范围,从而做出数据驱动的决策,有效优化订阅策略。 通过分析 Adapty 提供的这些数据图表,您可以深入了解 A/B 测试各实验变体的财务表现、统计显著性和收入效率,从而做出数据驱动的决策,有效优化订阅策略。

A/B 测试数据图表

Adapty 提供了一套完整的数据图表,帮助你有效衡量付费墙或用户引导变体的 A/B 测试效果。这些数据图表会实时持续更新,但浏览量除外——浏览量会定期更新。了解这些数据图表,有助于你评估不同实验变体的效果,并做出基于数据的决策,从而优化付费墙或用户引导策略。 A/B 测试数据图表可在 A/B 测试列表中查看,让你快速了解所有 A/B 测试的整体表现。该视图为每个测试实验变体提供汇总数据图表,方便你对比各变体的表现并识别显著差异。如需对某个 A/B 测试进行更深入的分析,可以访问 A/B 测试详情数据图表。该页面提供所选 A/B 测试的详细数据,帮助你深入了解各实验变体的具体表现。 除浏览量外,所有数据图表均归因于付费墙或用户引导中的产品。

数据图表控件

系统根据所选时间段显示数据图表,并按左侧列参数以三级缩进方式进行组织。

用户画像安装日期筛选

2bf4d9f-Area.gif

按安装日期筛选数据图表复选框可根据用户画像的安装日期来筛选数据图表,而非默认的以试用/购买日期(针对交易)或查看日期(针对付费墙或用户引导浏览量)进行筛选。勾选此复选框后,您可以将数据图表与用户画像安装日期对齐,从而专注于衡量特定时期的用户获取效果。此选项适用于根据具体需求自定义数据图表分析。

时间范围

您可以从多种时间段中选择来分析数据图表数据,支持按天、周、月或自定义日期范围等特定时长进行聚焦分析。

ab-test-time-ranges.png

可用的筛选与分组选项

主要文章:Analytics 控件

Adapty 提供了强大的筛选和自定义数据图表分析工具,满足你的各种需求。在 Adapty 的数据图表页面,你可以使用多种时间范围、分组选项和筛选条件。

  • ✅ 筛选条件:目标受众、归因、国家、付费墙、付费墙状态、付费墙分组、用户引导、版位、国家、应用商店、产品及产品商店。
  • ✅ 分组方式:产品和应用商店。

当您按 A/B 测试进行过滤时,跨版位 A/B 测试会以独立的子测试形式显示(例如 My test child-0My test child-1),每个版位对应一个子测试。详情请参阅跨版位 A/B 测试的限制

单项数据图表

付费墙或用户引导数据图表页面的核心组成部分之一是图表区域,它以可视化方式呈现所选数据图表,便于分析。

e6b0674-Area.gif

A/B 测试数据图表页面的图表区域包含一个水平条形图,直观呈现所选数据图表的数值。图中每条横柱对应一个数据图表值,且长度与数值成比例,便于快速理解数据。水平轴表示分析的时间范围,垂直列显示数据图表的具体数值。所有数据图表值的合计显示在图表旁边。 此外,点击数据图表区域右上角的箭头图标可以展开视图,以完整折线图的形式显示所选数据图表。

A/B 测试摘要

在单项数据图表旁边,会显示 A/B 测试详情摘要区域,其中包含有关 A/B 测试的状态、持续时间、版位及其他相关详情信息。

90fa3f5-Area.gif

数据图表定义

以下是 A/B 测试可用的关键数据图表:

30c7b68-Area.gif

Revenue

Revenue 表示 A/B 测试产生的购买和续订所带来的 USD 总金额。它包含初始购买和后续订阅续订。Revenue 数据图表在扣除 App Store 或 Play Store 佣金之前计算。

了解更多关于付费墙用户引导 Revenue 数据图表的信息。

CR to purchases

购买转化率衡量您的 A/B 测试将浏览转化为实际购买的效果。计算方式为购买次数除以浏览次数。例如,若有 10 次购买和 100 次浏览,购买转化率为 10%。

CR trials

试用转化率(CR)是从 A/B 测试中启动的试用次数除以浏览次数。试用转化率衡量您的 A/B 测试将浏览转化为试用激活的效果。计算方式为启动的试用次数除以浏览次数。

Purchases

Purchases 数据图表表示 A/B 测试在付费墙或用户引导中产生的交易总数。包含以下类型的购买:

  • 新增购买。
  • 已激活试用的试用转化。
  • 订阅的降级、升级和跨级。
  • 订阅恢复(例如,订阅在未自动续订的情况下过期后被恢复)。

请注意,续订不包含在 Purchases 数据图表中。

Trials

Trials 数据图表表示 A/B 测试中激活的试用总数。

Trials cancelled

Trials cancelled 数据图表表示已关闭自动续订的试用数量。当用户手动取消试用订阅时即发生此情况。

Refunds

A/B 测试的 Refunds 表示与测试变体相关的退款购买和订阅数量。

Views

Views 是 A/B 测试所包含的付费墙或用户引导的浏览次数。如果用户访问两次,则计为两次浏览。

Unique views

Unique views 是付费墙或用户引导的唯一浏览次数。如果用户访问两次,则计为一次唯一浏览。

Probability to be the best

Probability to be the best 数据图表量化了 A/B 测试中某一特定实验变体在所有测试付费墙或用户引导中成为表现最佳选项的可能性。它提供一个数值概率,表示每个付费墙或用户引导的相对表现。该数据图表以百分比表示,范围为 1% 至 100%。

ARPU(每用户平均收入)

仅适用于用户引导 A/B 测试。衡量特定时期内每位用户产生的平均收入。计算方式为总收入除以唯一用户数。

ARPPU(每付费用户平均收入)

ARPPU 是 A/B 测试产生的每付费用户平均收入。计算方式为总收入除以唯一付费用户数。例如,若您从 1,000 名付费用户中获得了 $15,000 的收入,则 ARPPU 为 $15。

ARPAS(每活跃订阅者平均收入)

ARPAS 是一项数据图表,用于衡量运行 A/B 测试期间每位活跃订阅者产生的平均收入。计算方式为总收入除以已激活试用或订阅的订阅者数量。例如,若总收入为 $5,000,订阅者数量为 1,000,则 ARPAS 为 $5。此数据图表有助于评估每位订阅者的平均变现潜力。

Proceeds

A/B 测试的 Proceeds 数据图表表示应用所有者从购买和续订中实际收到的 USD 金额,已扣除适用的 App Store / Play Store 佣金。它反映与 A/B 测试中测试变体相关的净收入,直接贡献于应用的收益。有关 Proceeds 计算方式的更多信息,请参阅 Adapty 文档。

Unique subscribers

Unique subscribers 数据图表表示通过 A/B 测试变体订阅或激活试用的不同用户数量。无论每位订阅者发起多少次订阅或试用,均只计算一次。

Unique paid subscribers

Unique paid subscribers 数据图表表示通过 A/B 测试变体成功完成购买并成为付费订阅者的唯一用户数量。

Refund rate

A/B 测试的退款率计算方式为:与测试变体相关的退款次数除以首次购买次数(不含续订)。例如,若有 5 次退款和 1,000 次首次购买,退款率为 0.5%。

Unique CR purchases

A/B 测试的唯一购买转化率计算方式为:与测试变体相关的购买次数除以唯一浏览次数。例如,若有 10 次购买和 100 次唯一浏览,唯一购买转化率为 10%。

Unique CR trials

A/B 测试的唯一试用转化率计算方式为:与测试变体相关的启动试用次数除以唯一浏览次数。例如,若有 30 次启动试用和 100 次唯一浏览,唯一试用转化率为 30%。

Completions & unique completions

仅适用于用户引导 A/B 测试。Completions 统计用户通过 A/B 测试变体完成用户引导的次数,即从第一屏到最后一屏的完整流程。如果某人完成两次,则计为两次 completions,但只有一次 unique completion

Unique completions rate

仅适用于用户引导 A/B 测试。唯一完成次数除以唯一浏览次数。此数据图表帮助您了解用户通过 A/B 测试变体与用户引导的互动情况,当您发现用户忽略用户引导时可据此进行优化。