概要:运行增量分析实验,了解用户获取(UA)广告的真正效果。
关于UA增量分析
在当今的全渠道营销环境中,理解真正的活动效果需要多个视角。最后触击归因对于实时绩效监控和细致洞察依然至关重要,但它无法判断某个活动是否带来了真正的因果提升。UA 增量分析通过衡量广告活动是否确实推动了新用户增长而增加了一个关键层面。
获客增量是通过科学严谨的地理位置实验来补充归因。这些自动测试可评估营销活动的实际因果增效,从而实现更明智的预算分配和更自信的决策。
作为备受信赖的营销云引领者,AppsFlyer 为获客提供增量分析,这是衡量营销活动真实效果的有效方法。该解决方案除了提供归因数据外,还提供关键且值得信赖的深入分析,从而在一个统一的平台上实现完整且无缝的测量。
为什么使用增量分析?
如今,用户获取团队面临复杂的挑战,包括用户路径碎片化、隐私限制增加以及不同渠道的可见性差距。UA 增量分析能够揭示营销活动的实际业务影响,帮助您克服这些障碍。
通过增量获取,您可以:
- 关注真实绩效:获取广告互动和归因转化以外的其他深入分析。了解哪些营销活动真正推动了增长—扩展归因提供的视图。
- 执行面对面比较:Meta、Google Ads 和 TikTok 等主要广告平台提供自动测试/对照组分配和原生支持,同时测试多个广告系列或媒体渠道。
- 优化预算分配:将花费从效果不佳的营销活动转移到推动实际用户增长的营销活动。
- 自动化实验工作流程:跳过手动设置,避免BI依赖项。AppsFlyer 可以实现实验设计、执行和分析的自动化。
- 保护隐私的措施:实验基于汇总的地理位置数据运行,符合 GDPR 和 Apple ATT 等隐私法规。
关于地理位置实验
获客增量采用基于地理位置的实验设计。地理区域根据应用的历史安装量或事件行为被划分为统计上相似的组别。一组暴露于您的UA广告活动中,另一组被阻止。实验运行一段时间后,分析两组之间的绩效差异,以揭示增量幅度。地理实验具有隐私安全、抗偏见,且不依赖用户级数据。
UA增量分析为您提供所需的分析信息,以了解营销活动的真正增量价值,不受不一致的用户级数据或定位重叠的影响。这将让您真正了解营销活动的效果,并帮助您做出更好的数据驱动决策。
实验设计和深入分析
本节解释如何构建获客实验的增量分析,如何使用增量分析,以及如何生成有关广告效果的可靠的因果分析。
了解地理位置实验
获客增量分析使用基于地理位置的实验,以科学严谨的方式评估真实的广告活动效果。我们不对用户进行细分,而是将地理区域划分为统计上相似的暴露区域和保留区域。根据规模和历史应用行为选择这些地区。广告仅在曝光区域运行,而保留区域不会曝光。通过比较两组在等待期内的行为,我们可以评估实际的因果关系,而不仅仅是相关性。
地理位置实验遵循结构化时间表:
- 测试:两组受监测广告系列影响的程度相等。在此期间,我们收集基线数据并构建模型,以捕捉暴露区域和保留区域之间的历史关系。
- 干预(实验):广告系列仅在暴露区域激活。保留区域被阻止查看已测广告系列中的广告。
- 因果关系计算:在试验期间,在保留区域和暴露区域观察到的结果之间的差异会随时间的推移而总结,并用于确定累积影响。
基于时间的回归(TBR)
地理位置实验的核心是基于时间的回归(TBR)。TBR 用于预测在没有营销干预的情况下会发生什么,来计算营销提升。这涉及将暴露区域(进行干预)中的观察结果与基于未暴露区域(未暴露于干预)和暴露区域之间的历史关系的预测结果进行比较。
工作原理:
- 创建展示区域和暴露区域的地理设计:
- 对于每个应用,AppsFlyer会分析历史应用安装或应用内事件行为,并使用TBR(在后续步骤中说明)在多个时间段内对数千个随机的地理区域进行分组,以找到差异最小的区域。
- 测试期:
- 在此期间,在干预开始前,将收集保留区和暴露区的数据。
- 建立回归模型,分析曝光区域与未曝光区域之间的时间序列关系。
- 预测反事实:
- 使用在测试前阶段开发的模型,预测测试期间保留区域的预期结果(如果未发生干预)。这被称为“反事实”。
- 测试期:
- 对于增量分析测试中的广告系列,在测试期间,预设的展示区域会被自动排除在广告观看之外。
- 因果关系计算:
- 每个时间点的干预的因果关系是保留区域观察到的结果与其反事实预测之间的差异。
- 累积效应:
- 随着时间的推移,对这些差异进行总结,以确定干预措施的累积影响(例如,安装或转化的总增长)。
- 营销提升:
- 营销提升是一种累积效应,用数量表示营销活动与不营销活动的预期相比带来的增量结果。
使用场景
UA增量分析能够揭示广告活动对业务的真正影响,帮助您解决增长的关键挑战。以下是基于地理位置的增量测试增加关键价值的常见使用案例。
-
优化跨广告平台的预算分配
挑战:归因指标显示多个平台的表现相似,但你不确定哪个真正推动了增长。解决方案:使用跨平台的多个单元格运行并行增量测试。使用结果来确定哪个平台带来实际提升,并相应地转移预算。 -
验证新渠道或新格式的效果
挑战:你在测试一个新的渠道或广告平台,但早期指标由于目标重叠而不一致或被夸大。解决方案:使用地理位置测试将新渠道的影响与组合中的其他渠道隔离开来。确定它是否带来净新安装,还是只是蚕食现有安装。 -
了解品牌营销活动的影响
挑战:品牌广告在归因报告中表现良好,但你不确定用户是否会转化。解决方案:地理实验可以揭示品牌搜索或展示广告是否真正影响了用户行为,还是它们是否捕捉到了现有需求。 -
比较同一平台的广告策略
挑战:您需要测试两种创意策略(例如视频 vs. 轮播)或竞价类型(例如,最大化安装 vs.ROAS)在同一广告平台中。解决方案:运行多单元格实验,将每个策略分配给不同的单元格。比较两者的增量幅度并选择获胜者。 -
将支出从饱和市场重新分配到可扩展市场
挑战:成熟市场显示收益递减和获取成本上升,但归因数据无法明确你是否触达了新用户。解决方案:地理位置提升测试显示这些市场中的广告活动是否仍然是增量式的。如果不是,则将预算转移到潜力较大的未开发或低估的地区。
选择要测量的内容
本节讨论为您的实验选择的最佳广告系列。以下是一些需要考虑的事项:
- 成效提升哪些测试能对整体营销策略产生最大影响?通常,通常,这意味着从最大规模的计划开始,因为更深入地了解它们如何影响增长将带来有意义的优化。
- 转化量:可靠的实验结果需要充分的数据支持,对于每个被测量的广告系列,根据您要测量的主要KPI,设定至少5000个每月应用安装或事件的目标
- 探索:当测试新事物(例如进入新市场或启动新渠道)时,增量是一个了不起的工具。
- 有明确的假设或测试问题:就像任何其他科学实验一样,花一些时间思考主要问题有助于提高增量分析实验的有效性和可操作性。例如,您是否希望一个渠道比其他渠道更具增量?如果您的假设得到证实或推翻,会对您的营销策略产生什么影响?
了解实验结果并利用深入分析
关键实验KPI输出包括:
- 提升衡量的营销活动的因果影响,即营销活动实际促成的额外转化(例如安装或应用内事件),超出没有它的情况。
- 增量转化:由测量的广告系列引起的安装或事件数。
- 每次增量安装成本/每次增量事件成本:每个增量转化的平均成本,基于广告活动的广告支出。
- 增量分析:增量安装或事件(由实验测量)与经典归因安装或事件(由AppsFlyer经典归因测量)之间的比率。
在控制面板部分查看实验KPI的完整列表
为了使增量分析具有可操作性,AppsFlyer提供了提升百分比和广告系列级别的增量KPI,用于有效的营销决策。
根据提升%进行优化:
A无提升
营销的最终目标是产生增量结果。如果您的广告活动被评估为没有提升(保留区域的表现与暴露区域的水平相同),这意味着它并没有产生超越没有它会发生的价值,需要进一步优化,才能对增长有意义。如果您的广告系列没有电梯,请考虑以下事项:
- 将预算转向更多增量营销活动或渠道。
- 优化与任何其他低效营销活动一样,您可以通过调整竞价、目标、目标受众、创意和其他相关因素来改进它。然后,您可以在更新后运行另一个增量测试,以监测增量是否有改善。
- 通过检查技术设置、定位、渠道组合、放置、预算、关键字、创意或营销活动重叠,诊断可能导致提升低的因素。这些学习对于优化未来增量成果大有裨益。
B正提升:
正提升意味着您的营销活动正在产生增量结果,超出没有增量的结果。作为第一步,您应该验证您的所有营销工作是否产生了正增长。当升幅为正时,请考虑以下因素:
- 增加对平台/渠道/活动的投资,以扩大已被证明能推动增长的领域。
- 通过扩大受众或地点来扩大影响力,从而扩大覆盖范围。
- 找出复制成功的增长因素,并确定制胜策略的优先级。
- 根据提升比较广告系列或渠道:提升是通过比较隐蔽区域和暴露区域计算的相对量度。因此,基于提升比较营销活动并非易事。例如,如果两个营销活动具有相同的影响,但其中一个营销活动触及的用户数量明显更高或花费金额明显更高,则其提升幅度会更高。
在比较时,尽量比较支出和覆盖范围相似并且通常针对相同地理区域的营销活动。 - 如果您刚刚开始为您的应用程序或业务进行增量评估,可能还没有一个可靠的基准来确定给定营销活动、渠道或投资预期的确切正增长水平。在这种情况下,建议采用AppsFlyer的活动级增量KPI进行优化,如下所述。
基于广告系列层级增量 KPI 进行优化:
A转化总量和成本指标:
与经典归因方法相同,增量转化总量和为生成这些转化所投入的广告费用为优化提供了明确且可行的指标。您可以使用广告系列层级的增量转化计数和每次增量转化的成本来确定广告系列是否符合您的数量和投资回报率目标,以及它相对于其他广告系列或渠道的表现。
B并肩使用经典归因和增量数据
对于广告系列层级转化数和每次转化成本,增量分析面板并肩显示典型的(最终源)归因数据和增量数据,以便您了解两个模型之间的关系,并在更大范围内对您的学习采取行动。
单独来看,经典(“最后一触”)归因和增量归因是两种不同的归因模型,各自有其优缺点:
- 经典(“最后点”)归属是实时、标准化、高度可扩展且细致的。因此,它可以从广告主端以及通过实时广告平台算法实现用户级优化。然而,它偏向于漏斗底部的互动,无法提供科学的因果证明。
- 增量分析是科学证明因果影响的好工具,非常适合全渠道评估。但是,它提供了汇总(营销活动级别)分析,并且是周期性的,难以扩展。
这两种模型结合使用时,可提供营销绩效的整体视图。AppsFlyer的增量因子展示了传统归因数据(作为持续营销优化的“基线”)与用于衡量因果影响的增量数据之间的关系。以下是如何使用增量因子进行优化:
-
增量系数大于100%:增量分析衡量的转化数多于同一广告系列经典归因衡量的转化数。例如,110% 的比率表示增量转化比传统归因衡量出的转化高出 10%。转化量的增加也会转化为每次转化成本的降低,因为同样的花费会带来更多转化。
如果增量系数高于100%,请考虑以下因素:- 根据每次增量转化成本的降低情况重新评估预算分配。
- 根据每次增量转化成本和广告支出增量回报重新评估竞价和优化目标。
- 在未来的营销决策之前,将因子应用于类似的营销活动。例如,如果您的视频营销活动在增量测试中始终显示应用安装的增量系数为 ~110%,那么在做出营销决策时,您可以将相似营销活动的传统归因应用安装提高 10%(即每 100 个传统归因安装实际上更接近 110 个安装)。
-
增量系数低于100%:增量分析衡量的转化数少于同一广告系列经典归因衡量的转化数。例如,90% 的转化率意味着增量转化比使用传统归因衡量的转化低 10%。转化量的减少也转化为每次转化成本的增加,因为相同消费额的转化量减少。如果增量系数低于100%,请考虑以下因素:
- 根据每次增量转化成本的增加重新评估预算分配。
-
- 根据每次增量转化成本和广告支出增量回报重新评估竞价和优化目标。
- 在类似的营销活动中实施此因素,为未来的营销决策提供信息。例如,如果您的视频营销活动在增量测试中始终显示应用安装的增量系数为 ~90%,那么在做出营销决策时,您可以将相似营销活动的传统归因应用安装降低 10%(即每100个传统归因安装实际上更接近90个安装)。
暂停或延长实验
在以下情况下考虑暂停实验(在默认30天之前):
- 提升、增量因子和成本指标在 7 天内保持稳定。
- 有商业理由以牺牲可能更不准确或“归一化”的增量指标为代价,获得更快的结果。
在以下情况下考虑延长实验(超过默认的30天):
- 营销活动的数量低于预期,预计增长将超过每日增量转化的最低要求。
- 被测事件的转化窗口格外长,需要更多时间让用户进行转化。
启用方式
要开始UA增量分析,请按以下步骤操作:
前期准备
- 具有UA订阅增量的AppsFlyer帐户(请与您的CSM启用)。
- 安装在移动应用中的 AppsFlyer SDK。
- 您的应用必须有至少 120 天的激活数据。
第1步:创建实验
第一步是创建实验。
创建实验:
-
点击即可访问UA的增量性优化> UA的增量性, 在 AppsFlyer 侧菜单中。
- 咔哒 + 新实验.
-
填写实验表格:
- 输入实验名称 - 为实验创建描述性名称,然后单击下一步。
-
定义你的地理设计 — 选择你想测量的应用、国家和主要指标。AppsFlyer利用这些数据计算实验中暴露区和滞留区的最佳分配。
提交后,AppsFlyer会审核你的地理设计——通常只需几分钟。你的地理设计要么可用,要么无法使用:
- 准备好了 —— 您的地理设计已获批准并可使用。你可以继续做实验。
- 不可用 ——根据所选应用、国家和指标组合的数据,地理设计目前不符合有效实验的要求。你可以尝试在30天后重新提交,因为随着申请收集更多数据,资格可能会发生变化。
注意
如果所选应用和国家存在地理设计规则,计算地理设计时会自动应用。参见 地理设计政策 了解更多。
注意
每个国家都有一定数量的单元格可用于实验。每个实验单元中包含一个测试组和一个对照组,这两组受众的结构相似,并能代表整个国家/地区的受众人群。您可以在一个实验中使用多个单元,对多个渠道中的不同广告系列进行直接对比,也可以将这些单元分别用于不同的实验中。
每个国家可用的单元格数量取决于该国的地理面积、人口分布和应用活动水平——这些因素会影响创建统计上有效的暴露/保留对。具有更细颗粒度、更活跃区域的国家/地区支持更多的单元格,从而进行更多的实验。
- 选择应用 - 选择相关的实验应用。
- 选择国家 - 然后选择要进行实验的国家。点击Next。
- 选择 主要度量 你想要测量。这可以是安装或应用内事件。
- 设置广告系列详情
- 您需要为每个实验单元格选择媒体渠道连接。这是您营销活动运行的媒体渠道。如果没有连接,你可以 建立新的联系。
-
然后选择相关活动进行实验测量。
增量实验可以设置为测量单个广告活动(例如,“谷歌广告活动相对于 Meta 活动的表现如何”),或者通过在单个实验单元内选择多个广告活动来衡量整个媒体源(例如,“Google 相对于Meta
请选择:
战役级别: 衡量单一活动在媒体来源中的影响
频道电平: 衡量媒体源内多个活动的联合影响注意:如果在同一单元格内选择多个广告活动:
- 所有被选中的竞选活动将共享相同的保留区域。
-
增量性洞察将在单元层面呈现,而非单个活动层面。
-
一旦地理设计获批,你将看到实验的详细分解:
- 保留地区 - 实验期间未暴露于你战役的区域
- 暴露区域 - 暴露于你的广告活动的区域,作为测量基线
- 地理设计规则 - 你的现行规则及其覆盖区域。了解详情
-
在选择活动名称时,下面您将看到基于所选主要指标所需的最低增量安装或事件数量,以高统计信心衡量活动的积极影响。这被称为实验的“最小可检测效应”。确保所选广告系列至少能产生此转化数。
提示:选择一个经常达到或超过这一最低要求的活动,以确保结果可靠且具有统计学上的有效性。
- 如果你愿意,可以添加额外的实验单元。补充一点:咔哒 + 实验单元 然后选择相关的连接和战役。每个实验单元中包含一个测试组和一个对照组,这两组受众的结构相似,并能代表整个国家/地区的受众人群。您可以在一个实验中使用多个单元,对多个媒体渠道中的不同广告系列进行直接对比,也可以将这些单元分别用于不同的实验中。
设置单元格后,单击下一步。
-
查看摘要-检查实验摘要是否良好,然后单击启动实验。
实验开始。初始结果将在24小时内显示。注意
实验结束后,关联的广告系列将返回其以前的地理位置定位设置。这样可以确保广告活动的连续性和一致性,让您无需手动重新配置定向即可恢复获客活动。
示例
假设你在美国做了一个实验,使用三个指定的暴露城市。在测试过程中,您的广告系列活动仅限于这些城市。实验结束后,广告活动会自动恢复其原始的目标定位——例如“美国(所有地点)”——按照实验开始前的配置。
第2步:分析结果并获取深入分析
您可以在实验控制面板上看到实验结果。
访问实验控制面板
-
点击你的增量实验,点击即可进入你的增量实验优化> UA的增量性, 在 AppsFlyer 侧菜单中。
-
点击特定实验以访问实验控制面板。
面板导览
控制面板顶部显示2个可视图形:
- 提升:曝光与保留区域图-显示每个实验单元的增量幅度。
- 实验时间表:曝光与保留区域图-显示每个单元格在实验日期范围内每天增量安装的并排比较。
仪表盘中部显示 实验KPIs(实验关键绩效指标) 按竞选小组、媒体来源和竞选活动分类:
- 经典的归因安装方式—— 该活动贡献的安装数量,按经典归因法衡量。
-
增量安装—— 根据实验衡量,活动贡献的安装数量。
- 增量因子—— 实验测量的增量安装量与经典归因安装量的比例。例如,110%表示激活增量比传统归因衡量出的激活量高出10%。
- 经典的每次安装归因成本—— 每个归因安装的平均成本,基于该活动的广告支出。
- 每次安装的增量成本—— 每个增量安装的平均成本,基于活动的广告支出。
- 广告系列实际带来的额外激活或事件数量,与未投放情况对比。计算方法为:举重(%) = (暴露组(排除区域)实际表现 - 暴露组预测表现 / 暴露组预测表现 * 100 * -1。
-
信心 - 对升力大于零的统计置信度水平。
关于如何阅读结果的指导,请参见 理解实验结果并运用这些洞见。
仪表盘底部是 累计增量安装 图表显示每个单元的累计增量安装量。
注意:如果 频道电平 选择测量(同一单元内多个活动):
- 所有被选中的竞选活动将共享相同的保留区域。
- 增量性洞察将在单元层面呈现,而非单个活动层面。
管理
本节将解释如何管理连接、地理设计策略和实验。
连接
对接指的是UA增量分析与媒体合作伙伴之间的对接。通过这些平台,您可以将广告系列联系起来,并在互联平台上进行测试。
要添加媒体渠道连接: ⁇
- 通过点击AppsFlyer侧菜单中的“优化 ⁇ >UA增量”来访问UA增量。
-
点击连接选项卡, 然后+ 新建连接。
-
选择要连接的媒体渠道
- 输入您的凭据以登录并创建连接。
地理设计政策
地理设计策略允许你在账户层面定义地理实验设计规则。规则是根据应用和国家设定的,并且在保存规则后自动应用到所有地理设计上。
利用地理设计规则来适应法律限制,保护高价值市场,或隔离受平行测试影响的区域。
地理设计规则类型
有三种规则类型可供选择:
| 规则类型 | 功能 | 使用场景示例 |
|---|---|---|
| 别犹豫了 | 这些区域从未被归入保留组,但仍可能处于暴露组中。你在这些地区的战役从未被实验暂停或中断。 | 一个必须时刻保持活跃的顶级市场。 |
| 不要瞄准 | 这些地区完全不在活动定位之外。它们不会出现在暴露或保留的群体中。 | 一个广告被法律限制的市场。 |
| 排除分析 | 这些地区将保留在活动定位中以维持正常广告活动,但不会被纳入曝光组或保留组。 |
|
建立一个地理设计规则
要设置地理设计规则:
- 在UA的增量中,点击 高级设置 Tab。
- 在 地理设计政策 部分,点击 + 新的地理设计规则.
- 在 新的地理设计规则 对话框,选择 应用 以及 乡村 此规则适用于。
- 下 规则, 配置每条规则:
- 选择 几何设计规则 类型:不要拖延,不要针对性分析,也不要排除分析。
- 选择 地区 (根据国家不同,称为州或次州地区)。你可以用姓名或代码搜索。
- 要为同一应用和国家添加另一种规则类型,请点击 + 添加规则.
- 复习 摘要 右侧面板,会随着你选择时实时更新。
- 点击保存。
该规则现已生效,并将适用于今后所选应用和国家计算的所有地理设计。
删除一个几何设计规则
要删除一个几何设计规则:
- 在 地理设计政策 部分,找到你想删除的规则。
- 打开动作菜单并选择 删除.
- 确认 删除规则? 对话。
注意
删除规则不会影响正在进行的实验。如果之前有规则(或没有规则),那么对于任何正在进行的实验仍然适用。删除规则只会从未来的地理设计/实验中移除它。
在实验中查看地理设计规则
一旦地理设计获批并开始实验,你会看到一个区域分解部分(标记为 规则适用) 显示:
- 保留地区 - 实验期间未暴露于你战役的区域
- 暴露区域 - 暴露于你的广告活动的区域,作为测量基线
- 排除规则 - 有效规则(不坚持不懈、不针对性、排除分析范围)及其覆盖的具体区域
在实验报告中,您可以选择以下选项查看完整的地理分析 地理设计解析 从操作菜单里。这显示了与上面相同的分解,展示了实验创建时激活的规则。要管理您的规则,请点击 管理地理设计政策 在面板底部。
特点与局限性
在处理地理设计规则时,请记住以下几点:
| 特性 | 描述 |
|---|---|
| 范围 | 规则针对应用和国家组合适用。 |
| 地理细粒度 | 地区根据国家不同,在州级或次级州级定义。 |
| 规则持久性 | 规则在删除前保持有效。 |
| 追溯效力 | 规则只适用于规则保存后计算的地理设计。正在进行的实验不会受到影响。 |
实验
您可以在一个地方查看和管理所有实验。
查看和管理实验:
在UA增量中,点击实验选项卡。
对于每个实验,您可以看到:
- 实验名称
- 应用程序 ⁇ -可排序
- 国家 - 可排序
- 媒体渠道
- 日期-实验日期范围
- 状态-您可以查看实验剩余天数或实验完成时间。
- 提升
状态列
- 已完成-试用期已结束
- 活跃 - 测试正在进行中
- 待定-实验结果待定(前24小时)
- 审核中-设计审核中(最多24小时后回复)
- 准备就绪 - 设计经过审核并认定合格
- 不 可用 - 设计经过审核,不合格
将鼠标悬停在实验上以访问动作图标。
您可以通过这个页面完成以下操作:
- 查看实验详情
- 延长实验时间
- 终止实验
结束实验
延长实验:
在实验中,点击操作图标(右上角),然后选择延长实验持续时间。
这将使试验再延长14天。
终止实验
要停止实验:
在实验中,点击右上角的⠇操作图标,然后选择停止实验。
特点与局限性
本节概述了获客增量的一些关键特征和局限性。
特性与局限性
| 特性 | 描述 |
|---|---|
| 支持的国家 | UA 增量分析目前支持在美国、印度、墨西哥、巴西、日本和德国进行的实验。其他可用国家/地区也将被添加。 |
| 支持的活动地理定位 | UA的渐进性支持针对单一整个国家的活动。针对多个国家或同一国家内特定地区(例如州或城市)的活动不被支持。 |
| 历史应用互动数据 | 该应用必须具有至少 120 天的可用安装和/或应用内事件数据。 |
| 每月最低非自然安装 | 每个被监测的应用每月必须产生至少10,000次非自然安装,才能运行有效的实验。 |