增量分析指南

高阶付费

At a glance: Incremental lift analysis measures the benefit derived from a remarketing (retargeting) campaign after taking into account organic cannibalization. To calculate lift, in AppsFlyer, you define an audience, select ad network partners to run the campaign, and then enable the ad network partner to receive the audience. AppsFlyer does the rest; we manage participants, test and control groups, partners, metrics, and more. Calculated results display in the Incrementality dashboard.

IncrementalityMetrics.png

相关阅读 | 启动增量分析试验 | 共享受众

Incrementality

增量分析用于确保再营销广告能启到显著的正向作用。它对比了那些没有被再营销影响的用户本身的自然转化。AppsFlyer 增量分析方案是基于医疗科学试验中的参与意图(intent-to-treat)方法论提出的。

通过 ITT 分析法,研究人员可以将受众随机分配给没有参与意图的对照组和有参与意图的测试组。是否真正实际参与并不重要。研究人员通过比较各组的结果来衡量参与效果。

同样,在再营销中,提升指标也衡量了广告真实效果。一个测试组用户是否和广告进行了互动(参与)并不重要,因为它的参与意图才是计算增量的关键。 

计算提升 

KB_-_Incrementality__3_.png

统计显著性 (p值)

为了确保提升分析结果并不是一个随机发生事件,ITT 方法论需要通计算 p值来评估其统计显著性。

p值表示,如果该试验再次测试,将会有高于90%的概率还会产生相同的结果。p值小于0.1(通常小于等于0.1)则表示具有统计显著性。它表示有足够的证据能够反对无效假设—有小于10%的概率无效假设是正确的(结果的随机性)因此,无效假设不成立,替代假设成立。

测试启动指南

增量分析面板

要使用增量分析面板

  1. 在 AppsFlyer 后台找到 面板 > 增量分析
  2. 设置筛选展示所需的数据指标。
  3. 使用显示控制来:
    • 选择不同的指标
    • 根据下表中的说明显示选项。 
组成部分 描述

FilterHeader.png

Audiences

选择受众。可以用来定向多个 app。 

首见时期

用户首次匹配到受众规则并纳入受众群体中的日期。

目标 app 受再营销广告影响的 app。
媒体渠道 向测试组用户展示广告的渠道
筛选器
组成部分 描述
选择指标

mceclip1.png

参数 描述
转化率 
  • 测试:转化用户/测试组用户
  • 控制:转化用户/对照组用户
  • 提升(测试转化率%–控制转化率%)/控制转化率%
  • 差:测试–控制
指定事件的每用户受益
  • 测试:转化用户的收益/转化用户数
  • 控制:转化用户的收益/转化用户数
  • 提升(每测试组用户收益–每对照组用户收益)/每控对照用户收益
  • 差:测试–控制
  • 渠道:按类似方法计算的分渠道指标
指定事件的每用户触发 
  • 测试:测试组用户触发事件数/测试组用户数 =(a)
  • 控制:对照组用户触发事件数/测试组用户数 =(b)
  • 提升:(a–b)/b
  • 差:a–b
 

 

群组规模

Incrementality_group_us-en.png

  • 测试:测试组用户
  • 控制:对照组用户
  • 目标媒体渠道
    • 用户分布百分比
    • 悬停显示配比
意义

Incrementality_signficance_us-en.png

统计显著性:

  • 测量实验结果(提升)的随机概率。
  • AppsFlyer认为p值<0.10是具有显著性的
  • 通常,测试数据规模越大,显著性越高
指标当前筛选条件计算指标
组成部分 描述
趋势以图表/表格形式展示

IncrementatilyChartHeader.jpg

使用以下控件更改图表/表格显示:

  • 分组条件: 
  • 查看类型: 
    • 图表
  • 计算为:
    • 累积的
    • 在一天
  • 导出:下载表格成为csv文件。 
趋势/表格

增量分析原始数据报告

Use Incrementality raw data reports to analyze the interaction of users with remarketing campaigns.

类别 报告名称 

Data locker 文件夹

首次可见

首次可见用户

incrementality_first_seen_users

应用内事件

自然应用内事件

incrementality_organic_inapps

应用内事件非自然

incrementality_inapps

应用内事件重归因

incrementality_inapps_reattr

互动

 

 

自然会话数

incrementality_organic_sessions

会话数非自然

incrementality_sessions

会话数重归因

incrementality_sessions_reattr

卸载

卸载(当前不包含此报告) 

incrementality_uninstalls
增量分析原始数据可查阅


报告逻辑

  • 参与实验分析的用户—首次可见报告
    • 在共享受众中,设置了参与实验的圈组用户。
    • When a given user, is identified as matching the rules, the event is recorded in the first_seen report. 
      • 用户会被随机分配到测试组或对照组中,并用is_control_group 字段区分。
      • Users in the test group are allocated to a media source (pid_destination) for retargeting.
  • app内的用户互动: 实验期间的app内的用户互动将被记录在对应上下文的报告中: 
    • 互动类型:会话或应用内事件
    • User attribution status when the user is first-seen: Organic, non-organic, re-attribution. For example, in the past, a user installed the app and was attributed to organic. As such, during an experiment, the attribution status is organic.  
  • 卸载:用户在测试期间卸载了 app。卸载监测必须是开启的状态 

数据特征和字段

可用类目会随着报告类型有所不同。

每种增量分析报告会有唯一字段
Field 描述 首次可见 应用内事件 互动 卸载
is_control_group 如果为true,则该用户属于对照组。 Y Y Y Y
pid_destination 用户被发送到的媒体渠道  Y Y Y Y
audience_id 独立标识符 Y Y Y Y
joined_audience_date 用户首次加入受众规则的日期 Y Y Y Y
audience_name 受众名称(非唯一)  Y Y Y Y
tm 一天中的时间   Y Y Y
时间戳 事件时间戳 YYYY-MM-DD HH:MM   Y Y  
app_ids 关联到共享受众规则的 App ID Y      

 

增量分析报告中每种报告类型的其他类目
Field 显示名称* 首次可见 应用内事件 互动 卸载
advertising_id 广告 ID (GAID) Y Y Y Y
android_id 安卓ID   Y Y  
app_id App ID Y Y Y Y
app_name 应用名称   Y Y  
app_version 应用版本   Y Y  
appsflyer_id AppsFlyer ID   Y Y Y
revenue_alt App 设定的货币   Y    
bundle_id 捆绑ID   Y Y  
国家 国家代码   Y Y Y
currency 货币代码   Y Y Y
CUSTOMER_USER_ID Customer user ID   Y Y  
品牌 设备品牌   Y Y  
device_category Device category   Y Y  
型号 设备型号    Y Y  
device_model 设备型号    Y Y  
device_type 设备型号   Y Y  
event_name eventName   Y Y Y
event_revenue Event revenue   Y    
event_revenue_currency 事件收入货币   Y    
event_revenue_u_s_d Event revenue USD   Y    
event_time 事件时间   Y Y Y
event_value Event value   Y Y  
idfa IDFA Y Y Y Y
idfv IDFV   Y Y  
imei IMEI   Y Y  
is_purchase_validated Is receipt validated   Y    
os_version OS 版本   Y Y  
平台 平台   Y Y Y
sdk_version SDK版本   Y Y  
* 根据原始数据规则

特性和限制

特征 备注
渠道访问 不支持
代理访问权限 不支持
代理数据透明化 不适用
时区 UTC
币种  USD
自然用户数据
非自然用户数据
数据新鲜度

每日

历史数据

不适用

团队成员访问 是的,每个帐户的权限。