概要:インクリメンタリティの検証を実施して、ユーザー獲得(UA)キャンペーンがもたらす真のインパクトを把握しましょう。
Incrementality for UAについて
今日のオムニチャネルなマーケティング環境では、キャンペーンの真の効果を理解するには、一つの視点だけでは不十分です。ラストタッチアトリビューションは、リアルタイムのパフォーマンス把握や詳細なインサイトにおいて今も重要ですが、それだけではキャンペーンが本当に因果的なリフトを生み出したかどうかは分かりません。 Incrementality for UA は、キャンペーンが実際に新規ユーザーの成長をもたらしたかどうかを計測することで、重要なレイヤーを追加します。
Incrementality for UA は、アトリビューションを科学的に厳密な地理的検証で補完することでこれを実現します。 These automated experiments measure the real causal lift of your campaigns, enabling smarter budget allocation and more confident decision-making.
こうした自動化された検証により、キャンペーンの真の因果的リフトを計測でき、より賢い予算配分と自信を持った意思決定が可能になります。
マーケティングクラウドの信頼されるリーダーとして、AppsFlyer はキャンペーンの真のインパクトを計測する強力な手段である Incrementality for UA を提供します。このソリューションは、アトリビューションと並んで重要で信頼性の高いインサイトを提供し、一つのプラットフォーム上で完全かつシームレスな計測を実現します。
Why use Incrementality for UA?Incrementality for UAを使用すべき理由
現在のユーザー獲得チームは、分断されたユーザージャーニー、プライバシー規制の強化、チャネル横断での可視性不足など、複雑な課題に直面しています。 Incrementality for UA は、キャンペーンの実際のビジネスインパクトを明らかにすることで、こうした障壁を乗り越える手助けをします。
Incrementality for UA によって次のことが可能になります:
- 真のパフォーマンスにフォーカス:広告エンゲージメントやアトリビューションされたコンバージョンを超えた追加のインサイトを獲得できます。どのキャンペーンが本当に成長を牽引しているのか、アトリビューションが提供する視点をさらに広げて理解できます。
- 比較テストの実施:主要な広告プラットフォーム(Meta、Google Ads、TikTok など)のサポートを活用し、自動化されたテスト/コントロールの配分によって複数のキャンペーンやメディアソースを同時にテストできます。
- 予算配分の最適化:効果の低いキャンペーンから投資をシフトし、実際にユーザー成長を生み出している施策へ再投資できます。
- テストフローの自動化:手動設定や BI 依存を避けられます。 AppsFlyer が検証設計、実行、分析を自動化します。
- プライバシーに配慮した計測:テストは GDPR や Apple の ATT に準拠した集計された地域レベルのデータで実施されます。
About geo-experimentation
Incrementality for UA は地域ベースの検証を採用しています。地理的な地域を、アプリの過去のインストールやイベント行動に基づき、統計的に類似したグループに分割します。一方のグループには UA キャンペーンの露出を行い、もう一方には露出しません。英定められた期間の検証後、2 つのグループのパフォーマンス差を分析することで、インクリメンタルリフトが明らかになります。地理的検証はプライバシーに安全で、バイアスに強く、ユーザーレベルデータに依存しません。
Incrementality for UA は、ユーザーレベルデータの不整合やターゲティングの重なりに妨げられることなく、マーケティングキャンペーンの真の増分価値を理解するために必要なインサイトを提供します。これにより、キャンペーンの効果に関する真の姿を把握し、より優れたデータドリブンな意思決定が可能になります。
Experiment design and insights
This section explains how Incrementality for UA experiments are structured, how to work with them, and how they generate reliable, causal insights into campaign performance.
Understanding geo experimentation
Incrementality for UA では、キャンペーンの真の効果を科学的に厳密に計測するために、地理的検証を用います。ユーザーを分割する代わりに、地理的エリアを統計的に類似した「広告を露出する地域」と「広告を露出しない地域」(ホールドアウト)に分けます。これらの地域は、地域の規模やアプリの過去の行動データをもとに選定されます。広告は露出する地域のみに配信され、露出しない地域には一切表示されません。検証期間中に両グループの行動を比較することで、相関ではなく、広告がもたらした実際の因果効果を把握できます。
Geo-experiments follow a structured timeline:
- 事前テスト:両グループに対して、計測対象のキャンペーン広告を同じ条件で露出させます。この期間にベースラインデータを収集し、露出地域とホールドアウト地域の歴史的な関係性をモデル化します。
- Intervention (the experiment): Campaigns are activated in the exposed regions only. Holdout regions are prevented from viewing ads from the measured campaigns.
- 因果関係の算出:検証期間中、露出地域とホールドアウト地域の観測値の差を時間とともに累積し、キャンペーンの総合的なインパクトを明らかにします。
時系列回帰分析(TBR)について
地理的検証の核心となるのが 時系列回帰分析(TBR)です。 TBR は、広告介入がなかった場合に何が起きていたか(反実仮想)を予測することで、マーケティングリフトを計算します。介入を行った露出地域の観測結果と、ホールドアウト地域の過去データに基づいた予測値を比較して算出します。
How it works:
- 露出地域・ホールドアウト地域の設計:
- アプリごとに、AppsFlyer が過去のインストールやイベントデータを分析し、複数期間・数千通りの地域組み合わせを TBR で評価し、差が最も小さいペアを選定します。
- 事前テスト期間:
- During this time, before the intervention starts, data is collected for both the holdout and exposed regions.
- 露出地域とホールドアウト地域の時系列関係を捉える回帰モデルを構築します。
- 反実仮想(counterfactual)の予測:
- 事前テストで作成したモデルを使って、テスト期間中の「ホールドアウト地域に介入がなかった場合の予測値」を算出します。これを反実仮想と呼びます。
- 検証期間:
- For the campaigns that are part of the Incrementality experiment, the predetermined holdout regions are automatically excluded from viewing ads for the duration of the experiment.
- 因果関係の算出:
- The causal effect of the intervention at each time point is the difference between the observed outcome in the holdout region and its counterfactual prediction.
- 累積効果の算出:
- These differences are summed up over time to determine the cumulative impact of the intervention (e.g., total increase in installs or conversions).
- マーケティングリフト:
- The marketing lift is the cumulative effect that quantifies the incremental results driven by marketing activity compared to what would have been expected without it.
使用事例
Incrementality for UA は、キャンペーンがビジネスにもたらす「本当の影響」を明らかにし、主要な成長課題を解決する手助けをします。以下は、地理的検証によるインクリメンタリティ計測が特に価値を発揮するケースです。
-
広告プラットフォーム間の予算配分を最適化する
課題アトリビューションの指標を見ると複数の広告プラットフォームのパフォーマンスが似通っており、どれが本当に成長を牽引しているのか判断できない。ソリューション:複数のプラットフォームにまたがって複数セルのインクリメンタリティテストを並行実施し、どのプラットフォームが実際にリフト効果を生み出しているのかを特定します。その結果に基づいて、予算配分を見直します。 -
新しいチャネルやフォーマットの効果を検証する
課題新しいチャネルや広告プラットフォームをテストしているものの、初期指標がターゲティングの重複などの影響で不安定、あるいは過大に見えてしまう。ソリューション:地理的検証を用いて、その新チャネルの効果を他のチャネルから切り離して計測します。これにより、「純粋な新規インストールを生んでいるのか」「既存の成果を食い合っているだけなのか」を見極めることができます。 -
ブランドキャンペーンの本当の効果を見極める
課題ブランドキャンペーンはアトリビューション上の成果が良く見えるものの、広告がなくてもユーザーがコンバージョンしていたのではないかという疑問が残る。ソリューション:地理的検証により、ブランド検索やディスプレイ広告が実際にユーザー行動に影響を与えているのか、それとも既に存在する需要を単に拾っているだけなのかを明らかにします。 -
同一プラットフォーム内でキャンペーン戦略を比較する
課題同じネットワーク内で、2 つのクリエイティブ戦略(例:動画 vs カルーセル)や入札戦略(例:インストール最大化 vs ROAS)を比較したい。ソリューション:各戦略をそれぞれ異なるセルに割り当てたマルチセルの地理的検証を実施し、それぞれのインクリメンタルリフトを比較して、どの戦略がより効果的かを判断します。 Compare the incremental lift of each and choose the winner. -
頭打ち市場から成長余地のある市場へ投資をシフトする
課題成熟市場ではリターンが逓減し、獲得単価も上昇しているものの、アトリビューションデータだけでは本当に新規ユーザーにリーチできているか判断しづらい。ソリューション:地理的リフトテストにより、こうした市場でのキャンペーンがまだインクリメンタルな成果を生んでいるかどうかを計測します。もしそうでない場合は、よりポテンシャルの高い未開拓または過小評価されている地域へ予算を再配分します。
計測対象の選択
This section discusses the best campaigns to select for your experiments. Here are a few things to consider:
- インパクト:どのテストが全体のマーケティング戦略に最も大きな影響を与えうるかを考えます。多くの場合、まずは規模の大きい取り組みから始めることで、それらが成長にどう寄与しているかを深く理解でき、大きな最適化につながります。
- コンバージョン数:強い検証には十分なデータ量が必要です。計測したい主なKPIに応じて、各キャンペーンごとに月あたり 5,000 件以上のアプリインストールまたはイベントを目安としてください。
- 調査:Incrementality は、新しい市場への参入や新チャネルの立ち上げなど、「これから試す」施策の検証にも非常に適しています。
- 明確な仮説や質問を持つ他の科学的な検証と同様に、検証の主となる問いをきちんと言語化しておくことで、Incrementality 検証の有効性と、得られた結果の“使いやすさ(アクショナビリティ)”が大きく高まります。たとえば:あるチャネルは他のチャネルよりインクリメンタルだと期待しているか?仮説が正しかった/間違っていた場合、それをどのようにマーケティング戦略へ反映させるか?
Understanding experiment results and using the insights
主要な検証 KPI は次のとおりです:
- リフト(%):計測対象のマーケティング活動が生み出した因果的なインパクト。 広告がなかった場合と比べて、どれだけ追加のコンバージョン(例:インストールやアプリ内イベント)を生んだかを示します。
- Incremental conversions(増分コンバージョン):検証によって「このキャンペーンが原因」と判断されたインストールやイベントの数。
- Cost per incremental install / Cost per incremental event(増分単価):キャンペーンの広告費に基づく、増分コンバージョン 1 件あたりの平均コスト。
- インクリメンタリティ係数:検証で得られた増分インストール/イベント数と、AppsFlyer のクラシックアトリビューションで計測されたインストール/イベント数との比率。
検証KPIの全一覧は、管理画面のセクションを参照してください。
これらのインサイトをマーケティングの意思決定に活かせるように、AppsFlyer では リフト(%) とキャンペーンレベルの Incrementality KPI の両方を提供しています。
Lift % に基づいた最適化
A. A.リフトが「0」の場合(No lift):
マーケティングの最終目的は、増分成果を生み出すことです。もしキャンペーンのリフトが 0(ホールドアウト地域と露出地域のパフォーマンスが同じ)と計測された場合、それは「広告がなくても同じ結果だった」ということを意味し、成長への貢献度を高めるには追加の最適化が必要です。 If your campaign has no lift, consider the following:
- よりインクリメンタルなキャンペーンやチャネルへ予算をシフトする
- Optimize: As with any other low-performing campaign, you can work to improve it by adjusting bids, goals, target audience, creatives, and other relevant factors. You can then run another Incrementality experiment following the update to monitor if incrementality has improved.
- テックセットアップ、ターゲティング、チャネルミックス、配置、予算、キーワード、クリエイティブ、キャンペーン同士の重複などを確認し、リフトが低い要因を洗い出す。これらの学びは、今後インクリメンタルな成果を最大化するうえで大きなヒントになります。
B. B.リフトが「プラス」の場合(Positive lift):
リフトがプラスということ は、キャンペーンが広告なしの状態を上回る増分成果を生み出していることを意味します。まずは、マーケティング活動全体がポジティブなリフトを生み出せているかを確認することが重要です。リフトがプラスのときに検討すべきことは以下の通りです:
- プラットフォーム/チャネル/キャンペーンへの投資を増やし、成長を促進すると実証されているものを拡大します。
- Broaden reach by expanding audiences or locations to amplify impact.
- 成功要因を特定し、他の施策にも展開することで優先すべき戦略を明確にする
- リフト を基準にキャンペーンを比較する際の注意点:リフト は、ホールドアウト地域と露出地域の比較に基づく「相対指標」です。そのため、リフトを基にキャンペーン同士を比較することは困難です。同じインパクトのキャンペーンでも、リーチしているユーザー数や投下予算が大きい方が、結果的にリフトが高く見えることがあります。
そのため比較する場合は、なるべく 同じくらいの配信規模・リーチ・予算規模 のキャンペーン同士、かつ ターゲット地域が近いもの同士を比べるのが理想的です。 - また、アプリやビジネスで Incrementality 計測を始めたばかりの段階では、「このチャネルならリフトはどの程度が普通か」といった明確なベンチマークがないことも多いです。その場合は、以下で説明する キャンペーンレベルの Incrementality KPI を軸に最適化していくことをおすすめします。
キャンペーンレベルの Incrementality KPI に基づく最適化:
A. A.増分コンバージョン合計とコスト指標:
クラシックアトリビューションと同じように、「どれだけの増分コンバージョンを、いくらの広告費で獲得したか」という視点は、非常に分かりやすく行動に移しやすい指標です。キャンペーンレベルの増分コンバージョン数と、増分コンバージョン単価を見ることで:そのキャンペーンがボリューム面・ROI 面で目標を満たしているか / 他のキャンペーンやチャネルと比べてどうか、を判断できます。
B. B.クラシックアトリビューションとIncrementality データを横並びで見る
Incrementality ダッシュボードでは、キャンペーンのコンバージョン数とコンバージョン単価について、クラシック(ラストタッチ)アトリビューションのデータ と Incrementalityのデータ を横並びで表示します。 これにより、2 つのモデルの関係性を理解し、そこから得た学びをより大きなスケールで活用することができます。When looked at separately, classic ("last-touch") attribution and incrementality are two different attribution models, each one with its own advantages and disadvantages:
- Classic ("last-touch") attribution is real-time, standardized, highly scalable, and granular. Therefore, it enables user-level optimization both from the advertiser end and through real-time ad platform algorithms. However, it is biased towards bottom-funnel engagement and does not provide scientific causal proof.
- Incrementality: 科学的に因果インパクトを証明でき、オムニチャネル計測に非常に有効 / ただし集計レベルでのインサイトであり、期間ごとに更新する必要があるためスケールはやや難しい However, it provides aggregated (campaign level) insights, and is periodic and harder to scale.
両方を組み合わせることで、マーケティングパフォーマンスをより立体的・包括的に捉えられます。 AppsFlyer の インクリメンタリティ係数 は、継続的なマーケティング最適化の「ベースライン」として使われるクラシックアトリビューションデータと、因果的なインパクトを計測するためのIncrementalityデータとの関係性を示す指標です。以下では、インクリメンタリティ係数をどのように最適化に活用できるかを説明します:
-
インクリメンタリティ係数が100%を超える場合:同じキャンペーンについて、クラシックアトリビューションで計測されたコンバージョン数よりも、Incrementality によるコンバージョン数の方が多いことを意味します。たとえば 110% であれば、増分コンバージョンがクラシックアトリビューションで計測されたコンバージョンより 10% 多いということです。同じ広告費でより多くのコンバージョンが獲得できているため、結果として 1 コンバージョンあたりのコストは低くなります。
インクリメンタリティ係数が 100% を上回っている場合は、以下の点を検討してください。- Re-evaluate budget allocation in accordance with the decrease in cost per incremental conversion.
- Re-evaluate bids and optimization goals in accordance with cost per incremental conversion and incremental return on ad spend.
- 将来のマーケティング判断に活かすため、類似キャンペーンを評価する際にもこの係数を前提として導入。たとえば、インクリメンタリティ検証で動画キャンペーンのアプリインストールにおける インクリメンタリティ係数が一貫しておよそ 110% を示している場合、類似のキャンペーンにおいては、意思決定を行う際にクラシックアトリビューション上のインストール数を 10% 多く見積もることができ(つまり、クラシックアトリビューションで 100 インストールと表示されていれば、実際には 110 インストールに近いとみなすことができます)、より現実に近い形で成果を評価できます。
-
インクリメンタリティ係数が100%未満:同じキャンペーンについて、クラシックアトリビューションで計測されたコンバージョン数よりも Incrementality で計測されたコンバージョン数のほうが少ないことを意味します。たとえば 90% の場合、増分コンバージョンがクラシックアトリビューションで計測されたコンバージョンより 10% 少ないということになります。同じ広告費で得られるコンバージョン数が少なくなるため、結果として 1 コンバージョンあたりのコストは高くなることになります。インクリメンタリティ係数が100%より低い場合は、以下の点を検討してください。
- 増分コンバージョン単価が上昇していることを踏まえ、予算配分を再評価。
-
- Re-evaluate bids and optimization goals in accordance with cost per incremental conversion and incremental return on ad spend.
- また、今後のマーケティング判断に役立てるため、類似キャンペーンの評価にこの係数を導入。たとえば、インクリメンタリティ検証で動画キャンペーンのアプリインストールにおける インクリメンタリティ係数 が一貫しておよそ 90% を示している場合、類似のキャンペーンにおいては、意思決定を行う際に従来のアトリビューション上のインストール数を 10% 低く見積もることができ(つまり、従来のアトリビューションで 100 インストールと表示されていても、実際の増分インストールは 90 件程度に近いとみなすことができ)、より保守的かつ現実に即した評価が可能になります。
Pausing or extending experiments
次のいずれかに該当する場合は、デフォルトの 30 日より前に検証を一時停止することを検討してください。
- 7 日以上にわたり、リフト、インクリメンタリティ係数、コスト関連の指標が安定して推移している
- インクリメンタリティ指標の精度や平常時との比較可能性がやや下がったとしても、ビジネス上、より早く結果を得ることに十分な理由がある。
逆に、次のような場合は、デフォルトの 30 日を超えて検証を延長することを検討してください。
- キャンペーンボリュームが当初の想定より少なく、日次の増分コンバージョン数が必要な最低ラインに届いていないものの、今後の増加が見込まれる。
- 計測対象イベントのコンバージョンウィンドウが非常に長く、ユーザーがコンバージョンに至るまでに追加の時間が必要となる。
利用開始手順
Incrementality for UA の利用を開始するには、次のステップに従ってください。
前提条件
- Incrementality for UA のサブスクリプションが有効になっているAppsFlyerの広告主アカウント(有効化については担当 CSM にお問い合わせください)
- アプリにAppsFlyer SDK が実装されていること
- アプリのインストールデータが少なくとも 120 日分蓄積されていること
ステップ 1. 検証を作成する
The first step is creating the experiment.
検証を作成するには:
-
AppsFlyer のサイドメニューからOptimize > Incrementality for UAをクリックし、Incrementality for UAの画面を開きます。
-
+ New experimentをクリックします。
-
Fill out the experiment form:
- 検証名を入力 - 検証を説明する名前を入力し、次へをクリックします。
-
地域設計を追加 (または選択) - 検証対象のアプリ、国、メイン指標を選択し、検証のベースとなる地域設計を定義します。 AppsFlyer uses this to calculate the optimal allocation of exposed and holdout regions for your experiment.
After you submit, AppsFlyer reviews your geo design — this usually takes just a few minutes. Your geo design will either be ready to use, or unavailable:
- Ready - 地域設計が適切な状態です。検証を開始できます。
- Unavailable - 現在のアプリ、国、計測の組み合わせに関するデータに基づく地域設計が適切ではない状態です。 (30日後に設計を再提出することも可能です)より多くのデータが利用できるようになると、対象になる可能性があります。
注意
If geo design rules exist for the selected app and country, they're automatically applied when the geo design is calculated. See Geo design policy to learn more.
Note
各国ごとに、検証で利用できる セル の数には上限があります。セルとは、その国全体と統計的に類似するように構成された「露出グループ」と「ホールドアウトグループ」のペアを指します。 1 つの検証の中で複数のセルを使ってメディアソースをまたいだキャンペーン同士を直接比較することもできますし、セルを分けて別々の検証で利用することもできます。
国ごとに利用可能なセルの数は、その国の地理的な広さ、人口分布、アプリのアクティビティレベルなど、統計的に妥当な露出/ホールドアウトのペアを構成できるかどうかに影響する要素によって決まります。細かく分割されたアクティブな地域を多く持つ国ほど、より多くのセルを設定でき、実施可能な検証の幅も広がります。
- アプリを選択 - 検証対象となるアプリを選択します。
- Select country - Then, select the country where you want to run the experiment. Click Next.
- 計測したいメイン指標を選択します。(インストール、またはアプリ内イベントを指定できます。
- キャンペーンの詳細を設定 -
- 各検証のセルに対して、キャンペーンを配信するメディアソースの接続を選択する必要があります。 This is the media source where your campaign runs. まだ接続がない場合は、新しい接続を作成できます。
-
Then select the relevant campaigns to measure in the experiment.
Incrementality experiments can be set to measure individual campaigns (for example, "How is the Google campaign performing vs. the Meta campaign") or the entire media source by selecting multiple campaigns within a single experiment cell (for example, "How is Google performing vs. Meta?").
Choose between:
Campaign level: to measure the impact of a single campaign within a media source
Channel level: to measure the joint impact of multiple campaigns within a media sourceNote: If multiple campaigns are selected within one cell:
- All selected campaigns will share the same holdout regions.
-
Incrementality insights will be presented at the cell level, and not at the individual campaign level.
-
Once a geo design is approved, you’ll see the experiment breakdown:
- Incrementality 検証の対象となるキャンペーンでは、ホールドアウト地域は検証中ずっと広告配信対象から除外されます。
- リフト - キャンペーンによって発生したインストール数と、キャンペーンなしで発生したインストール数の比較計算方法:リフト (%) =(露出グループ(対象ジオ)の実績値 − 露出グループの予測値)/ 露出グループの予測値 × 100 × -1
- Geo design rules - Your active rules and the regions they cover. Learn more
-
選択したメイン指標に基づき、キャンペーンのポジティブなインパクトを高い統計的信頼度で計測するために必要な、最小の増分インストール数またはイベント数が表示されます。これは検証の「検出可能な最小効果」と呼ばれます。選択したキャンペーンが、少なくともこのコンバージョン数を見込めるかどうかを確認してください。
ヒント:安定してこの最低ラインを満たす、あるいは上回るキャンペーンを選ぶことで、より信頼性が高く統計的に有意な結果を得やすくなります。 - 必要に応じて、さらにセルを追加してください。検証で別のセルを追加する場合は、+ New cell をクリックし、関連する連携とキャンペーンを選択してください。セルとは、その国全体と統計的に類似するように構成された「露出グループ」と「ホールドアウトグループ」のペアを指します。 1つの検証の中で複数のセルを利用することで、異なるメディアソースのキャンペーン同士を直接比較できます。
セルを設定したら、[次へ] をクリックします。
-
サマリーの確認 - 検証のサマリーを確認し、問題なければ検証開始をクリックしてください。
これで検証が開始されます。最初の結果は 24 時間以内に表示されます。注意:
検証が終了すると、紐づいているキャンペーンのジオターゲティング設定は自動的に検証前の状態に戻ります。これにより、キャンペーンの継続性と一貫性が保たれ、ターゲティングを改めて手動で設定しなくても UAキャンペーンをスムーズに再開できます。
例
たとえば、日本で3つの都道府県を露出地域として設定して検証を行ったとします。 During the experiment, your campaign was restricted to only those cities. When the experiment ends, the campaign will automatically resume its original targeting—such as "United States (all locations)"—as it was configured before the experiment began.
ステップ 2. 結果を分析し、インサイトを得る
You can see the experiment results on the experiment dashboard.
[検証]ダッシュボードへのアクセス
-
AppsFlyerのサイドメニューで、 Optimize >Incrementality for UA をクリックして、[検証]のタブを開いてください。
-
Click the specific experiment to access the experiment dashboard.
A tour of the dashboard
管理画面の最上部には、2つのグラフが表示されます。
- リフト:広告の露出地域とホールドアウト地域のグラフ - 検証のセルごとの増分リフトを示します。
- 検証のタイムライン:広告の露出地域とホールドアウト地域のグラフ - 検証を実施した期間における、1日あたりの増分インストールをセルごとに並べて比較します。
ダッシュボード中央には、セル別・メディアソース別・キャンペーン別の検証KPIが表示されます:
- Classic attribution installs - The number of installs the campaign contributed, as measured by classic attribution.
-
Incrementality installs - The number of installs the campaign contributed, as measured by the experiment.
- Incrementality factor - The ratio between incremental installs (measured by the experiment) to classic attribution installs. For example, a 110% rate means incremental installs are 10% higher than installs measured using classic attribution.
- Classic attribution cost per install - The average cost of every attributed install, based on the campaign's ad spend.
- Incrementality cost per install - The average cost of every incremental install, based on the campaign's ad spend.
- Lift - How many more installs occurred because of your campaign, compared to what would have happened without it. Calculated as: Lift (%) = (actual performance in exposed group (excluded regions) - predicted performance in exposed group) / predicted performance in exposed group * 100 * -1.
-
Confidence - The level of statistical confidence that the lift is greater than zero.
For guidance on how to read the results, see Understanding experiment results and using the insights.
管理画面の下部には、増分インストールの累積グラフがあり、セルごとの増分インストールの累積値を示しています。
Note: If Channel level measurement is selected (multiple campaigns within one cell):
- All selected campaigns will share the same holdout regions.
- Incrementality insights will be presented at the cell level, and not at the individual campaign level.
管理
This section explains how to manage your connections, geo design policy, and experiments.
接続
接続とは、Incrementality for UAとメディアパートナーとの連携を指します。キャンペーンをリンクさせ、接続されたプラットフォームでの検証を実施することが可能になります。
メディアソース接続を追加する方法:
- AppsFlyerのサイドメニューで、 Optimize > Incrementality for UA をクリックして、Incrementality for UA にアクセスします。
-
[接続] タブをクリックし、[+ 新しい接続] をクリックします。
-
接続するメディアソースを選択してください。
- 認証情報を入力してログインし、接続を作成します。
Geo designs management page.png
The geo design policy lets you define geographic experiment design rules at the account level. Rules are set per app and country, and are automatically applied to all geo designs calculated after the rule is saved.
Use geo design rules to accommodate legal restrictions, protect high-value markets, or isolate regions affected by parallel tests.
Geo design rule types
Three rule types are available:
| Rule type | What it does | Example use case |
|---|---|---|
| Don't holdout | These regions are never placed in holdout groups, but can still be in exposed groups. Your campaigns in these regions are never paused or interrupted by the experiment. | A top-performing market that must stay active at all times. |
| Don't target | These regions are excluded from campaign targeting entirely. They won't appear in exposed or holdout groups. | A market where advertising is legally restricted. |
| Exclude from analysis | These regions will stay in the campaign targeting to maintain normal advertising activity, but won’t be included in exposed or holdout groups. |
|
Set up a geo design rule
To set up a geo design rule:
- Incrementality for UA で、地域設計のタブをクリックします。
- 国を選択 - 検証を実行する国を選択して、次へをクリックします。
- In the New geo design rule dialog, select the app and country this rule applies to.
- Under Rules, configure each rule:
- Select the Geo design rule type: Don't holdout, Don't target, or Exclude from analysis.
- Select the regions (states or sub-state regions, depending on the country). You can search by name or code.
- To add another rule type for the same app and country, click + Add rule.
- Review the Summary panel on the right, which updates in real time as you make selections.
- Click Save.
The rule is now active and will be applied to all geo designs calculated for the selected app and country going forward.
Delete a geo design rule
To delete a geo design rule:
- In the Geo design policy section, find the rule you want to remove.
- Open the actions menu and select Delete.
- Confirm in the Delete rule? dialog.
Note
Deleting a rule doesn't affect active experiments. If there were previous rules (or no rules), that is what remains in effect for any experiment already running. Deleting a rule only removes it from future geo designs/experiments.
View geo design rules in an experiment
Once a geo design is approved and you're setting up your experiment, you'll see a region breakdown section (marked Rules apply) showing:
- 介入(検証フェーズ):キャンペーンの広告を露出地域のみに配信し、ホールドアウト地域では広告を見られないよう制御します。
- 地域設計はアプリごとに整理され、国、主要指標、ステータス、作成者、作成日、設計に基づいた検証回数が表示されます。
- Exclusion rules - The active rules (Don't holdout, Don't target, Exclude from analysis) and the specific regions they cover
In the experiment report, you can view the full geo breakdown by selecting Geo design breakdown from the actions menu. This shows the same breakdown as above, showing the rules that were active when the experiment was created. To manage your rules, click Manage geo design policy at the bottom of the panel.
特徴・制限
Keep the following in mind when working with geo design rules:
| Trait | Description |
|---|---|
| Scope | Rules apply per app and country combination. |
| Geographic granularity | Regions are defined at the state or sub-state level, depending on the country. |
| Rule persistence | Rules remain active until deleted. |
| Retroactivity | Rules apply only to geo designs calculated after the rule was saved. Active experiments are not affected. |
Experiments
You can view and manage all your experiments in one place.
検証を表示および管理するには:
Incrementality for UA で、検証 タブをクリックします。
For each experiment, you can see the:
- Experiment name
- アプリ - ソート可能
- 国 - ソート可能
- メディアソース
- 日付 - 検証日の範囲
- ステータス - 検証の残り日数または完了日
- リフト
[ステータス]の カラム
- Completed - 検証期間が終了
- Active - 検証中
- Pending - 検証結果が保留中(最初の24時間)
- In review - 設計をレビュー中(回答まで最大24時間)
- Ready - 設計がレビューされ、適切であることが判明した状態
- Unavailable - 設計はレビューされたものの、適切ではなかった状態
検証にカーソルを合わせ、のアイコンをクリックしてください。
このページでは次のことが可能です:
- 検証の詳細を見る
- 検証期間の延長
- Stop experiment
Extend experiment
To extend an experiment:
検証から、右上のアイコンをクリックして、検証期間の延長 を選択します。
これにより、検証はさらに14日間延長されます。
Stop experiment
検証を停止するには:
From the experiment, click the ⠇actions icon (on the upper-right) and select Stop experiment.
特性と制限
このセクションでは、Incrementality for UAの主な特徴と制限について説明します。
特性と制約事項
| Trait | 詳細 |
|---|---|
| サポート対象地域 | Incrementality for UAは現在、米国、日本、インド、メキシコ、ブラジル、ドイツでの検証をサポートしています。今後も対応国は順次追加される予定です。 |
| Supported campaign geo-targeting | Incrementality for UA supports campaigns that target a single, entire country. Campaigns that target multiple countries or specific regions within a country (for example, states or cities) aren't supported. |
| アプリエンゲージメントの過去データ | 過去120日以上のインストールおよび/またはアプリ内イベントデータが必要です。 |
| 必要な月間の非オーガニックインストール数 | 有効なテストを実行するには、対象アプリが毎月少なくとも10,000件の非オーガニックインストールを計測している必要があります。 |