Краткий обзор: Запустите эксперимент на инкрементальность, чтобы понять реальное влияние ваших кампаний по привлечению пользователей (UA).
Об инкрементальности для UA
В современной омниканальной маркетинговой среде, чтобы по-настоящему оценить эффективность кампании, нужна не одна точка зрения. Атрибуция по последнему взаимодействию по-прежнему необходима для оперативного мониторинга эффективности и получения детальных инсайтов, однако она не показывает, обеспечила ли кампания реальный инкрементальный прирост. Инкрементальность для UA добавляет критически важный слой, измеряя, действительно ли кампании стимулируют приток новых пользователей.
Инкрементальность для UA делает это, дополняя атрибуцию научно обоснованными гео-экспериментами. Эти автоматизированные эксперименты измеряют реальный каузальный прирост ваших кампаний, позволяя более разумно распределять бюджет и принимать более уверенные решения.
Будучи надёжным лидером в сфере облачных маркетинговых решений, AppsFlyer предлагает «Инкрементальность для UA» – высокоэффективный способ измерить реальное влияние ваших кампаний. Это решение предоставляет ключевые, достоверные инсайты в дополнение к атрибуции, обеспечивая комплексное и бесшовное измерение в единой платформе.
Зачем использовать инкрементальность для UA?
Команды по привлечению пользователей сегодня сталкиваются со сложными задачами, включая фрагментированные пользовательские пути, растущие ограничения конфиденциальности и пробелы в видимости на различных каналах. «Инкрементальность для UA» помогает вам преодолеть эти барьеры, раскрывая реальное влияние ваших кампаний на бизнес.
С инкрементальностью для UA вы можете:
- Сосредоточиться на реальной эффективности: Получайте дополнительные инсайты, выходящие за рамки взаимодействия с рекламой и атрибутированных конверсий. Разберитесь, какие кампании действительно стимулируют рост, расширяя представление, которое даёт атрибуция.
- Проводите прямые сравнения один-к-одному (head-to-head): Тестируйте одновременно несколько кампаний или источников трафика с автоматическим распределением на тестовую и контрольную группы и нативной поддержкой таких крупных рекламных платформ, как Meta, Google Ads и TikTok.
- Оптимизируйте распределение бюджета: Перенаправьте бюджет с малоэффективных кампаний и реинвестируйте его в те, которые обеспечивают реальный рост пользователей.
- Автоматизируйте рабочие процессы экспериментов: Избавьтесь от ручной настройки и зависимости от BI-систем. AppsFlyer автоматизирует проектирование, выполнение и анализ экспериментов.
- Измеряйте с учетом конфиденциальности: Эксперименты проводятся на агрегированных данных на уровне гео, соответствующих требованиям конфиденциальности, таким как GDPR и ATT от Apple.
О гео-экспериментах
Инкрементальность для UA использует экспериментальный дизайн на основе гео. Географические регионы делятся на статистически схожие группы на основе исторических установок приложения или поведения по событиям. Одна группа видит вашу кампанию по привлечению пользователей, а другая — нет. По завершении эксперимента, проводимого в течение заданного периода, анализируется разница в результатах двух групп, чтобы выявить инкрементальный прирост. Гео-эксперименты безопасны с точки зрения конфиденциальности, устойчивы к искажениям и не зависят от данных на уровне пользователя.
Инкрементальность для UA Incrementality for UA даёт вам необходимые инсайты, чтобы понять истинную инкрементальную ценность ваших маркетинговых кампаний – без помех из-за несогласованных данных на уровне пользователя или перекрывающегося таргетинга. Это даст вам истинную картину эффективности ваших кампаний и поможет принимать более обоснованные решения на основе данных.
Дизайн эксперимента и инсайты
Этот раздел объясняет, как структурированы эксперименты инкрементальности для UA, как с ними работать и как они генерируют надежные, каузальные инсайты о результативности кампаний.
Понимание гео-экспериментов
Инкрементальность для UA использует гео-эксперименты для измерения истинного воздействия кампании научно обоснованным способом. Вместо сегментации пользователей мы разбиваем географические области на статистически схожие регионы показа и контрольные регионы Эти регионы выбираются на основе размера и исторических данных о поведении приложения. Реклама показывается только в регионах показа, тогда как контрольные регионы не получают показов вовсе. Сравнив поведение двух групп в контрольный период, мы сможем измерить истинный каузальный эффект – а не просто корреляцию.
Геоэксперименты идут по структурированному графику:
- Предварительное тестирование: Обе группы одинаково подвергаются воздействию рекламы из измеряемых кампаний. В этот период мы собираем базовые данные и создаём модель, отражающую историческую взаимосвязь между регионами показа и контрольными регионами.
- Интервенция (эксперимент): Кампании активируются только в подвергнутых воздействию регионах. Контрольные регионы не могут видеть рекламу из измеряемых кампаний.
- Расчет каузального эффекта: Разница между наблюдаемыми результатами в контрольных регионах и регионах показа во время эксперимента суммируется по времени и используется для определения совокупного эффекта.
Регрессия с учётом времени (TBR)
В центре наших геоэкспериментов находится Регрессия на основе времени (TBR). TBR используется для расчета маркетингового роста, прогнозируя, что произошло бы при отсутствии маркетингового воздействия. Это подразумевает сравнение наблюдаемых результатов в регионе показа (где проводилось вмешательство) с прогнозируемыми результатами, рассчитанными на основе исторической взаимосвязи между контрольным регионом (не подвергавшимся вмешательству) и регионом показа.
Как это работает:
- Создание геодизайнов контрольных и подвергнутых воздействию регионов:
- Для каждого приложения AppsFlyer анализирует исторические данные об установках и in-app событиях и применяет метод TBR (описанный далее) к тысячам рандомизированных наборов географических контрольных/регионах показа в разные временные периоды, чтобы выбрать те, где расхождение минимально.
- Период предварительного тестирования:
- В это время, до начала интервенции, данные собираются как для контрольных, так и для подвергнутых воздействию регионов.
- Создаётся регрессионная модель, чтобы отразить взаимосвязь между временными рядами региона показа и контрольного региона.
- Прогноз контрфактических показателей:
- Опираясь на модель, разработанную в предтестовый период, во время тестового периода мы прогнозируем ожидаемые результаты для контрольного региона, если бы вмешательство не проводилось. Эти результаты называются "контрфактическими".
- Тестовый период:
- Для кампаний, которые являются частью эксперимента по инкрементальности, заранее определенные контрольные регионы автоматически исключаются из показа рекламы на время эксперимента.
- Расчет каузального эффекта:
- Каузальный эффект вмешательства в каждый момент времени — это разница между наблюдаемым результатом в контрольном регионе и его контрфактическим предсказанием.
- Кумулятивные эффекты:
- Эти различия суммируются с течением времени, чтобы определить кумулятивное воздействие вмешательства (например, общий рост установок или конверсий).
- Маркетинговый прирост:
- Маркетинговый прирост — это совокупный эффект, который измеряет инкрементальные результаты, достигнутые благодаря маркетинговой активности, по сравнению с тем, что ожидалось бы без неё.
Примеры использования
Инкрементальность для UA помогает вам решить ключевые проблемы роста, раскрывая истинное влияние ваших кампаний на бизнес. Ниже — несколько типовых сценариев, в которых гео-тестирование инкрементальности добавляет критически важные данные.
-
Оптимизируйте распределение бюджета между рекламными платформами
Проблема: Метрики атрибуции показывают схожие результаты на разных платформах, но вы не уверены, какая из них на самом деле обеспечивает рост. Решение: Проводите параллельные тесты инкрементальности, используя несколько ячеек на разных платформах. Используйте результаты, чтобы определить, какая платформа действительно вызывает рост, и соответственно перераспределите бюджет. -
Проверьте эффективность новых каналов или форматов
Проблема: Вы тестируете новый канал или рекламную платформу, но первые метрики нестабильны или завышены из-за перекрёстного таргетинга. Решение: Используйте гео-тестирование, чтобы изолировать влияние нового канала от остальных в вашем медиамиксе. Определите, обеспечивает ли он чистый прирост установок или лишь каннибализирует существующие. -
Понимание влияния брендовых кампаний
Проблема: Брендовые кампании показывают хорошие результаты в отчётах по атрибуции, но вы не уверены, что пользователи и без того не совершили бы конверсию. Решение: Гео-эксперименты помогают выяснить, действительно ли брендовые поисковые или медийные объявления влияют на поведение пользователей, или же они лишь перехватывают существующий спрос. -
Сравните стратегии кампаний внутри одной платформы
Проблема: Вы хотите протестировать две креативные стратегии (например, видео vs. карусель) или типы ставок (например, максимизация установок против). ROAS) в одной сети. Решение: Проведите многоячеечный эксперимент, назначив каждой стратегии отдельную ячейку. Сравните инкрементальный прирост каждой стратегии и выберите победителя. -
Перенаправьте бюджет из насыщенных рынков в масштабируемые.
Проблема: На зрелых рынках наблюдается снижение отдачи и рост стоимости привлечения, однако данные атрибуции не дают понять, достигаете ли вы новых пользователей. Решение: Гео-инкрементальные тесты показывают, показывают, приносят ли кампании на этих рынках всё ещё инкрементальный прирост. Если нет, перераспределите бюджет в неосвоенные или недооценённые регионы с более высоким потенциалом.
Выбор того, что измерять
В этом разделе рассматривается, какие кампании лучше всего выбрать для ваших экспериментов. Вот несколько вещей, которые стоит учесть:
- Эффект: Какой тест способен сильнее всего повлиять на вашу общую стратегию? Зачастую это означает начинать с ваших крупнейших инициатив, ведь более глубокое понимание того, как они влияют на рост, приведёт к значительным оптимизациям.
- Объём конверсий: Надёжным экспериментам нужен достаточный объём данных. Для каждой оцениваемой кампании стремитесь обеспечить не менее 5000 установок приложения или событий в месяц -- в зависимости от основного KPI, который вы собираетесь измерять.
- Исследование: Инкрементальность — это удивительный инструмент при тестировании чего-то нового, например, выхода на новый рынок или запуска нового канала.
- Наличие чёткой гипотезы или тестового вопроса: Как и в любом другом научном эксперименте, уделите время формулировке основного вопроса — это повысит эффективность и практическую применимость вашего эксперимента по инкрементальности. Например, ожидаете ли вы, что один канал будет более инкрементальным, чем другой? Как это повлияет на вашу маркетинговую стратегию, если ваша гипотеза подтвердится или будет опровергнута?
Понимание результатов эксперимента и использование полученных инсайтов
Ключевые показатели эффективности эксперимента включают:
- Прирост (%): Каузальный эффект измеряемой маркетинговой активности — это дополнительные конверсии (например, установки или события внутри приложения), которые ваша кампания действительно обеспечила сверх того, что произошло бы без неё.
- Инкрементальные конверсии: Количество установок или событий, вызванных измеренной кампанией.
- Стоимость за инкрементальную установку / Стоимость за инкрементальное событие: Средняя стоимость каждой инкрементальной конверсии, рассчитанная исходя из рекламных затрат кампании.
- Фактор инкрементальности: Отношение инкрементальных установок или событий (измеренных в эксперименте) к классическим установкам или событиям по атрибуции (измеренным в классической атрибуции AppsFlyer).
Смотрите полный список KPI эксперимента в разделе дэшборда.
Чтобы сделать инсайты Incrementality применимыми, AppsFlyer предоставляет как показатель прироста (Lift %), так и инкрементальные KPI на уровне кампании для принятия эффективных маркетинговых решений.
Оптимизация на основе Lift %:
A Нет прироста:
Главная цель маркетинга — обеспечивать инкрементальные результаты. Если по результатам измерений кампания не показала прироста (контрольные регионы демонстрируют тот же уровень, что и регионы показа), это значит, что она не добавляет ценности сверх того, что случилось бы без неё, и требует дальнейшей оптимизации, чтобы стать весомым драйвером роста. Если у вашей кампании нет прироста, рассмотрите следующее:
- Перенаправьте бюджеты на более инкрементальные кампании или каналы.
- Оптимизация: Как и любую другую низкоэффективную кампанию, вы можете улучшить её, изменив ставки, цели, целевую аудиторию, креативы и другие релевантные факторы. Затем вы можете провести еще один эксперимент по инкрементальности после обновления, чтобы отследить, улучшилась ли инкрементальность.
- Выясните, какие факторы могут вызывать низкий прирост, проверив техническую настройку, таргетинг, медиамикс, размещения, бюджеты, ключевые слова, креативы или перекрытие кампаний. Эти знания будут очень полезны для оптимизации на основе инкрементальных результатов в будущем.
Б. Положительный прирост:
Положительный прирост означает, что ваша кампания приносит инкрементальные результаты сверх тех, которые достигаются без неё. На первом этапе убедитесь, что все ваши маркетинговые усилия обеспечивают положительный прирост. Когда прирост положительный, рассмотрите следующее:
- Увеличьте инвестиции в платформы, каналы и кампании, чтобы масштабировать то, что уже доказало свою эффективность для роста.
- Расширьте охват, увеличив аудитории или географию, чтобы усилить эффект.
- Определите факторы роста, чтобы дублировать успех и приоритизировать выигрышные стратегии.
- Сравните кампании или каналы на основе прироста: Прирост — это относительная мера, рассчитанная путем сравнения контрольных и регионов показа. Таким образом, сравнивать кампании по показателю прироста сложно. Например, если обе кампании имеют одинаковое воздействие, но одна из них достигает значительно большего числа пользователей или имеет значительно больший объем расходов, ее прирост будет выше.
При сравнении старайтесь сравнивать кампании, которые схожи по расходам и охвату и в целом нацелены на одни и те же географические регионы. - Если вы только начинаете измерять инкрементальность для вашего приложения или бизнеса, у вас может еще не быть надежной отправной точки, чтобы определить точный уровень положительного прироста, ожидаемого от данной кампании, канала или инвестиции. В этом случае рекомендуется оптимизировать с помощью KPI инкрементальности на уровне кампании в AppsFlyer, как описано ниже.
Оптимизация на основе KPI инкрементальности на уровне кампании:
A Общие инкрементальные конверсии и метрики затрат:
Как и в классической атрибуции, общий объём инкрементальных конверсий и рекламные затраты, вложенные в их получение, дают чёткие и применимые метрики для оптимизации. Вы можете использовать количество инкрементальных конверсий на уровне кампании и стоимость одной инкрементальной конверсии, чтобы оценить, соответствует ли кампания вашим целевым объёмам и показателям ROI, а также сравнить её эффективность с другими кампаниями или каналами.
Б. Совместное использование данных классической атрибуции и инкрементальности
В дэшборде «Инкрементальность» показатели количества конверсий на уровне кампании и стоимости одной конверсии выводятся в двух разрезах — по классической атрибуции (последнее касание) И по инкрементальности — чтобы вы могли увидеть взаимосвязь между обеими моделями и масштабировать полученные инсайты.
Рассматриваемые по-отдельности, классическая атрибуция («последнее касание») и инкрементальность представляют собой две разные модели атрибуции, каждая со своими преимуществами и недостатками:
- Классическая атрибуция («последнее касание») работает в режиме реального времени, стандартизирована, легко масштабируется и отличается высокой детализацией. Таким образом, она позволяет выполнять оптимизацию на уровне пользователя как со стороны рекламодателя, так и посредством алгоритмов рекламных платформ в реальном времени. Однако она смещена в пользу взаимодействий в нижней части воронки и не дает научного каузального подтверждения.
- Инкрементальность -- отличный инструмент для научного подтверждения каузального эффекта и идеален для омниканального измерения. Однако она предоставляет агрегированные инсайты на уровне кампании, и является периодической и более сложной для масштабирования.
Используемые вместе, эти две модели дают целостное представление о результативности маркетинга. Фактор инкрементальности от AppsFlyer демонстрирует взаимосвязь между классическими данными атрибуции, которые служат «базовой линией» для постоянной оптимизации маркетинга, и данными инкрементальности, которые используются для измерения причинного прироста. Вот как вы можете использовать факторы инкрементальности для оптимизации:
-
Фактор инкрементальности выше 100%: Инкрементальность измерила больше конверсий, чем конверсии, измеренные в классической атрибуции для той же кампании. Например, показатель в 110 % означает, что инкрементальные конверсии на 10 % выше конверсий, измеренных по классической атрибуции. Этот рост числа конверсий также приводит к снижению стоимости одной конверсии, поскольку при тех же затратах достигается больше конверсий.
Если фактор инкрементальности выше 100%, рассмотрите следующие варианты действий:- Пересмотрите распределение бюджета с учётом снижения стоимости одной инкрементальной конверсии.
- Пересмотрите ставки и цели оптимизации с учётом стоимости одной инкрементальной конверсии и инкрементальной окупаемости рекламных расходов.
- Примените этот коэффициент к аналогичным кампаниям до того, как будете принимать последующие маркетинговые решения. Например, если ваши видеокампании стабильно показывают коэффициент инкрементальности около 110 % по установкам приложения в инкрементальных экспериментах, при принятии маркетинговых решений можно считать, что установки по классической атрибуции для схожих кампаний на 10 % выше (то есть каждые 100 установок по классической атрибуции фактически ближе к 110).
-
Коэффициент инкрементальности ниже 100%: Инкрементальность показала меньше конверсий, чем классическая атрибуция для той же кампании. Например, показатель 90 % означает, что инкрементальные конверсии на 10 % ниже конверсий, измеренных по классической атрибуции. Сокращение числа конверсий также ведёт к росту стоимости одной конверсии, поскольку при тех же затратах достигается меньше результатов. Если коэффициент инкрементальности ниже 100%, попробуйте следующие действия:
- Пересмотрите распределение бюджета с учётом увеличения стоимости одной инкрементальной конверсии.
-
- Пересмотрите ставки и цели оптимизации с учётом стоимости одной инкрементальной конверсии и инкрементальной окупаемости рекламных расходов.
- Примените этот коэффициент к аналогичным кампаниям, чтобы учитывать его при последующих маркетинговых решениях. Например, если ваши видеокампании стабильно показывают коэффициент инкрементальности около 90 % по установкам приложения в инкрементальных экспериментах, при принятии маркетинговых решений можно считать, что установки по классической атрибуции для схожих кампаний на 10 % ниже (то есть каждые 100 установок по классической атрибуции фактически ближе к 90).
Приостановка или продление экспериментов
Рассмотрите возможность приостановки экспериментов (до истечения стандартных 30 дней), если:
- Метрики роста, коэффициента инкрементальности и стоимости оставались стабильными более 7 дней.
- Есть коммерческое обоснование для получения более быстрых результатов за счет потенциально менее точных или менее «нормализованных» метрик инкрементальности.
Рассмотрите возможность продления экспериментов (более стандартных 30 дней), если:
- Объём кампании оказался ниже ожиданий, но ожидается, что он превысит минимальное требование по дневным инкрементальным конверсиям.
- Окно конверсии для измеряемого события исключительно длинное, что требует дополнительного времени для конверсии пользователей.
Начало работы
Чтобы начать работу с инкрементальностью для UA, выполните следующие шаги:
Необходимые условия
- Учетная запись AppsFlyer с подпиской на Инкрементальность для UA (попросите вашего менеджера подключить).
- AppsFlyer SDK установлен в ваших мобильных приложениях.
- У вашего приложения должно быть как минимум 120 дней данных об установках.
Шаг 1. Создайте эксперимент
Первый шаг - создание эксперимента.
Чтобы создать эксперимент:
-
Получите доступ к Инкрементальности для UA, нажав Оптимизировать > Инкрементальность для UA в боковом меню AppsFlyer.
- Нажмите + Новый эксперимент
-
Заполните форму эксперимента:
- Введите название эксперимента. Создайте информативное название для эксперимента, затем нажмите Далее.
-
Определите свой геодизайн — выберите приложение, страну и основную метрику, которую хотите измерить. AppsFlyer использует эти данные, чтобы рассчитать оптимальное распределение тестовых и контрольных регионов для вашего эксперимента.
После отправки заявки AppsFlyer проверяет ваш геодизайн — обычно это занимает всего несколько минут. Ваш геодизайн либо будет готов к использованию, либо недоступен:
- Готово — ваш геодизайн одобрен и готов к использованию. Можно приступить к эксперименту.
- Недоступно — геодизайн в настоящее время не соответствует требованиям валидного эксперимента, исходя из данных, доступных для выбранного приложения, страны и комбинации метрик. Вы можете отправить заявку повторно через 30 дней, поскольку по мере накопления данных вашим приложением соответствие критериям может измениться.
Примечание
Если правила геодизайна существуют для выбранного приложения и страны, они автоматически применяются при расчете геодизайна. Дополнительные сведения см. в разделе Политика геодизайна.
Примечание
В каждой стране есть определенное количество ячеек, доступных для вашего эксперимента. Ячейка состоит из пары регионов показа и контрольных регионов, сформированных так, чтобы быть сопоставимыми друг с другом и со всей страной. В одном эксперименте можно использовать несколько ячеек для прямого сравнения разных кампаний в различных медиа-источниках или задействовать их по отдельности в отдельных экспериментах.
Количество доступных ячеек для каждой страны зависит от её географического размера, распределения населения и уровня активности приложения – факторов, влияющих на возможность сформировать статистически достоверные пары регионов показа/контроля». Страны с более дробной и активной региональной структурой поддерживают больше ячеек, что открывает возможность для большего числа экспериментов.
- Выберите приложение. -Выберите соответствующее приложение для эксперимента.
- Выберите страну. Затем выберите страну, в которой вы хотите провести эксперимент. Нажмите Далее.
- Выберите Основную метрику, которую вы хотите измерить. Это могут быть установки или событие в приложении.
- Настроить детали кампании:
- Вам нужно выбрать соединение Медиа-источник для каждой экспериментальной ячейки. Это медиа-источник, на котором запускается ваша кампания. Если нет соединений, вы можете создать новое соединение.
-
Затем выберите релевантные кампании, которые следует измерять в рамках эксперимента.
Эксперименты по инкрементальности можно настроить для оценки отдельных кампаний (например, «Насколько эффективна кампания Google по сравнению с кампанией Meta») или всего медиаисточника, выбрав несколько кампаний в одной экспериментальной ячейке (например, «Как работает Google или как работает Google против Meta»).
Выберите между:
Уровень кампании: чтобы измерить воздействие одной кампании в одном медиаисточнике
Уровень канала: чтобы измерить совместное воздействие нескольких кампаний в одном медиаисточникеПримечание: Если в одной ячейке выбрано несколько кампаний:
- Все выбранные кампании будут проводиться в одних и тех же регионах.
-
Аналитика инкрементальности будет представлена на уровне ячеек, а не на уровне отдельных кампаний.
-
Как только геодизайн будет одобрен, откроется расшифровка эксперимента:
- Контрольные регионы - регионы, не охваченные вашими кампаниями во время эксперимента.
- Тестовые регионы - регионы, в которых проводились ваши кампании и которые используются в качестве базового показателя для измерения
- Правила геодизайна — ваши действующие правила и охватываемые ими регионы. Узнать больше
-
При выборе названия кампании ниже отображается минимальное число инкрементальных установок или событий (в зависимости от выбранной основной метрики), необходимое для того, чтобы с высокой статистической достоверностью измерить положительный эффект кампании. Это называется «минимально обнаруживаемым эффектом» эксперимента. Убедитесь, что выбранная кампания сгенерирует как минимум это количество конверсий.
Совет: Выберите кампанию, которая регулярно достигает или превышает этот минимум, чтобы обеспечить надёжные, статистически достоверные результаты.
- При необходимости можно добавить дополнительные экспериментальные ячейки. Чтобы это сделать: Нажмите + Ячейка эксперимента и выберите нужное подключение и кампанию. Ячейка состоит из пары регионов показа и контрольных регионов, сформированных так, чтобы быть сопоставимыми друг с другом и со всей страной. Вы можете использовать несколько ячеек в одном эксперименте для сравнения различных кампаний по медиа-источникам.
После настройки ячеек нажмите Далее.
-
Обзор сводки. Убедитесь, что сводка эксперимента выглядит корректно, затем нажмите Запустить эксперимент.
Эксперимент начинается. Первые результаты появятся в течение 24 часов.Примечание
После завершения эксперимента подключенные кампании вернутся к своим предыдущим настройкам гео-таргетинга. Это обеспечивает непрерывность и согласованность кампании и позволяет возобновить активности по привлечению пользователей (UA) без необходимости вручную перенастраивать таргетинг.
Пример
Предположим, вы провели эксперимент в США, выделив три тестовых города. Во время эксперимента ваша кампания была ограничена только этими городами. После завершения эксперимента кампания автоматически вернётся к исходному таргетингу – например «США (все регионы)» – который был настроен до начала эксперимента.
Шаг 2. Анализируйте результаты и получайте инсайты
Вы можете увидеть результаты эксперимента на дэшборде эксперимента.
Доступ к дэшборду эксперимента
-
Перейдите к вашей Инкрементальности для UA экспериментов, нажав Оптимизировать > Инкрементальность для UA в боковом меню AppsFlyer.
-
Нажмите на конкретный эксперимент, чтобы получить доступ к дэшборду эксперимента.
Обзор дэшборда
В верхней части дашборда отображаются две визуальные диаграммы:
- Прирост: График «Регионы показа vs. контрольные регионы» — показывает инкрементальный прирост для каждой ячейки эксперимента.«Открытые против контрольных регионов» показывает инкрементальный прирост на ячейку эксперимента.
- График эксперимента: График «Регионы показа vs. контрольные регионы» — отображает сравнение инкрементальных установок по каждому дню диапазона дат эксперимента для каждой ячейки.
В средней части дэшборда отображаются KPI эксперимента по ячейке кампании, медиа-источнику и самой кампании:
- Классические атрибуционные установки — количество установок, которые кампания принесла по данным классической атрибуции.
-
Инкрементальные установки - Количество установок, которые принесла кампания по данным эксперимента.
- Коэффициент инкрементальности - отношение количества инкрементальных установок (из эксперимента) к установкам по классической атрибуции. Например, коэффициент 110%% означает, что количество инкрементальных установок на 10%% выше, чем количество установок, измеренных с помощью классической атрибуции.
- Стоимость установки по классической атрибуции - средняя стоимость каждой атрибутированной установки, рассчитанная исходя из рекламных затрат кампании.
- Стоимость установки по инкрементальности - средняя стоимость каждой инкрементальной установки, исходя из рекламных затрат кампании.
- Показатель прироста - сколько дополнительных установок произошло благодаря вашей кампании по сравнению с тем, что случилось бы без неё. Формула расчёта: Прирост (%) = (фактический показатель в тестовой группе (исключенные регионы) − прогнозируемый показатель в тестовой группе) / прогнозируемый показатель в тестовой группе × 100 × (−1).
-
Достоверность - уровень статистической уверенности в том, что прирост превышает ноль.
Чтобы узнать, как интерпретировать результаты, см. раздел «Расшифровка результатов эксперимента и их использование».
В нижней части дэшборда расположен график «Накопительные инкрементальные установки», который отображает суммарные инкрементальные установки по каждой ячейке.
Примечание: Если выбрано измерение на уровне канала (несколько кампаний в одной ячейке):
- Все выбранные кампании будут проводиться в одних и тех же регионах.
- Аналитика инкрементальности будет представлена на уровне ячеек, а не на уровне отдельных кампаний.
Управление
В этом разделе содержит пояснения, как управлять подключениями, политикой геодизайна и экспериментами.
Подключения
Под подключениями подразумевается интеграция между Инкрементальностью для UA и вашими медиа-партнерами. Они позволяют связывать кампании и проводить эксперименты с подключенными платформами.
Чтобы добавить подключения медиа-источников:
- Зайдите в Инкрементальности для UA, нажав Оптимизировать > Инкрементальность для UA в боковом меню AppsFlyer.
-
Нажмите на вкладку Подключения, затем + Новое подключение.
-
Выберите медиа-источник для подключения
- Введите свои учетные данные для входа и создания подключения.
Политика геодизайна
Политика геодизайна позволяет определять правила планирования географических экспериментов на уровне учетной записи. Правила устанавливаются для каждого приложения и страны и автоматически применяются ко всем геодизайнам проектам, рассчитанным после сохранения правила.
Используйте правила геодизайна, чтобы учитывать законодательные ограничения, защитить рынки высокой ценности или изолировать регионы, затронутые параллельным тестированием.
Типы правил геодизайна
Доступны три типа правил:
| Тип правила | Как оно применяется | Кейс |
|---|---|---|
| Не включать в контрольные группы | Эти регионы никогда не включаются в контрольные группы, но могут входить в тестовые группы. Кампании в этих регионах никогда не приостанавливаются и не прерываются из-за эксперимента. | Рынок с наивысшими показателями, который должен оставаться активным постоянно. |
| Не таргетировать | Эти регионы полностью исключены из таргетинга кампании. Они не будут появляться в тестовых или контрольных группах. | Рынок, на котором реклама запрещена законом. |
| Исключить из анализа | Эти регионы останутся в таргетинге кампании, чтобы поддерживать нормальную рекламную активность, но не будут включены ни в тестовую, ни в контрольную группы. |
|
Настройка правила геодизайна
Чтобы настроить правило геодизайна:
- В разделе «Инкрементальность для UA» нажмите вкладку «Дополнительные настройки».
- В разделе Политика геодизайна нажмите + Новое правило геодизайна.
- В диалоговом окне «Новое правило геодизайна» выберите приложение и страну, к которой применяется это правило.
- В разделе Правила настройте каждое правило:
- Выберите тип Правило геодизайна: Не выделять контрольную группу, не таргетировать или исключить из анализа.
- Выберите регионы (штаты или субрегиональные единицы, в зависимости от страны). Можно искать по имени или коду.
- Чтобы добавить другой тип правила для того же приложения и страны, нажмите + Добавить правило .
- Просмотрите панель «Сводка» справа — она обновляется в режиме реального времени по мере того, как вы делаете выбор.
- Нажмите Сохранить.
Теперь правило активно и в дальнейшем будет применяться ко всем геодизайнам, рассчитанным для выбранного приложения и страны.
Удалить правило геодизайна
Чтобы удалить правило геодизайна:
- В разделе Политика геодизайна найдите правило, которое хотите удалить.
- Откройте меню действий и выберите «Удалить».
- Подтвердите действие в диалоговом окне Удалить правило?
Примечание
Удаление правила не влияет на активные эксперименты. Если ранее были установлены правила (или правил не было), выбранное остаётся в силе для всех уже запущенных экспериментов. Удаление правила удаляет его только из будущих геодизайнов/экспериментов.
Просмотр правил геодизайна в эксперименте
Как только геодизайн будет одобрен и вы начнете эксперимент, вы увидите раздел с разбивкой по регионам (отмечен как «Применяются правила»), в котором указано:
- Контрольные регионы — регионы, исключённые из показов ваших кампаний на время эксперимента.
- Тестовые регионы — регионы, где проводились ваши кампании и которые служат базовой точкой отсчёта для измерений.
- Правила исключения — активные правила («Не выделять контрольную группу», «Не таргетировать», «Исключить из анализа») и конкретные регионы, на которые они распространяются.
В отчете по эксперименту вы можете просмотреть полную географическую разбивку, выбрав пункт Рабивка по геодизайну в меню действий. Здесь показана та же разбивка, что и выше, с указанием правил, действовавших на момент создания эксперимента. Чтобы управлять правилами, нажмите «Управление политикой геодизайна» в нижней части панели.
Характеристики и ограничения
При работе с правилами геодизайна следует иметь в виду следующее:
| Специфика | Описание |
|---|---|
| Область применения | Правила применяются для каждой пары «приложение + страна». |
| Географическая детализация | Регионы определяются на уровне штата или субрегиона в зависимости от страны. |
| Длительность действия правил | Правила остаются активными до тех пор, пока не будут удалены. |
| Обратная сила | Правила применяются только к геопроектам, рассчитанным после сохранения правила. Это не влияет на активные эксперименты. |
Эксперименты
Вы можете просматривать и управлять всеми вашими экспериментами в одном месте.
Чтобы просмотреть и управлять вашими экспериментами:
В Инкрементальности для UA нажмите на вкладку Эксперименты.
Для каждого эксперимента вы можете увидеть:
- Название эксперимента
- Приложение - сортируемый
- Страна - сортируемый
- Медиа-источник
- Даты - Диапазон дат эксперимента
- Статус - Вы можете увидеть количество дней, оставшихся до завершения эксперимента или когда он завершен.
- Прирост
Столбец статуса
- Завершено - Период эксперимента завершен
- Активно - Эксперимент выполняется
- Ожидание - Результаты эксперимента ожидаются (первые 24 часа)
- На рассмотрении - Дизайн на рассмотрении ( ответ в течение 24 часов)
- Готово - Дизайн был рассмотрен и признан подходящим
- Недоступно - Дизайн был рассмотрен и был признан неподходящим
Наведите курсор на эксперимент, чтобы получить доступ к.
Отсюда вы можете:
- Просмотреть детали эксперимента
- Продлить длительность эксперимента
- Остановить эксперимент
Продлить эксперимент
Чтобы продлить эксперимент:
В эксперименте нажмите на (в правом верхнем углу) и выберите Продлить продолжительность эксперимента.
Это продлит эксперимент на дополнительные 14 дней.
Остановить эксперимент
Чтобы остановить эксперимент:
В эксперименте нажмите на значок ⠇действий (в правом верхнем углу) и выберите Остановить эксперимент.
Характеристики и ограничения
В этом разделе описаны некоторые ключевые характеристики и ограничения инкрементальности для UA.
Характеристики и ограничения
| Специфика | Описание |
|---|---|
| Поддерживаемые страны | Инкрементальность для UA в настоящее время поддерживает эксперименты в Соединенных Штатах, Индии, Мексике, Бразилии, Японии и Германии. Дополнительные страны будут добавлены по мере их доступности. |
| Поддержка гео-таргетинга кампаний | Функция «Инкрементальность для UA» поддерживает кампании, которые нацелены на одну страну целиком. Кампании, которые нацелены на несколько стран или конкретные регионы внутри страны (например, штаты или города), не поддерживаются. |
| Исторические данные о взаимодействии с приложением | Приложение должно иметь как минимум 120 дней данных о установках и/или событиях в приложении. |
| Минимальные ежемесячные неорганические установки | Каждое измеряемое приложение должно генерировать не менее 10 000 неорганических установок в месяц, чтобы провести валидный эксперимент. |