Руководство по A/B-тестированию AppsFlyer

Для:
маркетологов
Последнее обновление:

Краткий обзор. Используйте AppsFlyer для A/B-тестирования медиа-источников, кампаний, креативов, таргетинга и размещения рекламы.

AB_TESTING.jpg

Что такое A/B-тестирование?

A/B-тестирование — это метод, используемый маркетологами для тестирования различных элементов своих рекламных объявлений и кампаний. Каждое объявление содержит элементы (таргетинг, визуальные элементы, тексты), которые могут повлиять на коэффициент конверсии потенциальных пользователей. Поиск наиболее эффективных вариантов рекламных элементов может существенно повлиять на прибыль от вашего мобильного маркетинга.

В этой статье объясняется, как рекламодатели могут проводить A/B-тесты с помощью AppsFlyer, чтобы найти наиболее эффективные рекламные элементы.

Как проводить A/B-тестирование мобильных кампаний

Чтобы протестировать элемент, разделите мобильный трафик 50/50 между двумя источниками, показывающими одинаковое предложение. Затем создайте два варианта элемента, который вы хотите протестировать. После поступления достаточного количества трафика вы можете сравнить результаты существующей версии (контрольной) с новой версией (вариант).

Следующие шаги применимы к A/B-тесту, который вы запускаете с помощью AppsFlyer.

Настройка:

  1. Выберите элемент для тестирования.
    В этой статье мы расскажем о креативах для A/B-тестирования, размещении рекламы, медиа-источниках и кампаниях.
  2. Создайте две одинаковые кампании (или объявления), а затем измените один элемент в объявлении. Например, копию кнопки призыва к действию.
    • Чтобы проверить влияние варианта на коэффициент конверсии установок, разделите трафик между двумя кампаниями поровну. 
      Если полные данные по показам доступны для обоих источников, разделите установки по показам, чтобы рассчитать коэффициенты конверсии установок.
    • Чтобы проверить влияние варианта на качество пользователей, после установки вы можете направлять разное количество трафика на обе кампании.
  3. Привлеките достаточное количество трафика к каждой кампании, чтобы достичь статистической значимости, то есть не менее 50 установок на кампанию. Используйте калькулятор значимости A/B-тестирования.

Анализ:

  1. Используйте дэшборд и данные AppsFlyer для сравнения эффективности ключевых показателей эффективности двух кампаний.
  2. Выберите выигрышный вариант и используйте его в своих кампаниях.

A/B-тестирование, креативы и таргетинг

Креативы содержат множество элементов, которые по-разному влияют на коэффициент конверсии пользователей, включая текст, изображения, цвета, шрифты, кнопки и т. д. Параметры таргетинга, такие как страна, возраст или пол, также могут существенно повлиять на коэффициент конверсии. А для iOS 15+ вы также можете иметь до 35 настраиваемых страниц товара. A/B-тестирование этих элементов поможет вам определить, какие факторы оказывают наибольшее влияние на повышение коэффициента конверсии пользователей.

Ниже мы расскажем о двух методах A/B-тестирования с использованием:

  • Один медиа-источник
  • Несколько медиа-источников
Метод Плюсы Минусы
A/B-тестирование с использованием одного медиа-источника
  • Быстрая настройка
  • Простой в тестировании коэффициент конверсии установок
  • Результаты могут применяться только к пользователям из конкретного медиа-источника
  • Тестирование может занять больше времени
A/B-тестирование в нескольких медиа-источниках
  • Быстрые результаты
  • Результаты применимы к пользователям из всех медиа-источников
  • Необходимо обновить ссылки атрибуции в нескольких местах

Метод 1: A/B-тестирование в одном медиа-источнике

Настройка:

  1. Выберите надежный медиа-источник с достаточным трафиком.
  2. Создайте две кампании или смарт-баннера в AppsFlyer одним из следующих способов:
    • Измените название кампании, которое является параметром «c» в ссылке атрибуции.
    • Или вы можете создать два набора объявлений («af_adset=») в рамках кампании или отдельные объявления («af_ad=») в наборе объявлений. Примечание: В смарт-баннерах вы также можете провести A/B-тестирование, указав разные параметры для каждого баннера в одной и той же группе баннеров.
    • В iOS 15+ вы также можете протестировать эффективность разных настраиваемых страниц товаров, отправляя разные URL-адреса OneLink на разные страницы товаров. Узнать больше
  3. Используйте один и тот же креатив в обеих кампаниях, за исключением протестированного варианта.
  4. Отправляйте одинаковое количество трафика на обе кампании.

Анализ:

  • Сравните ключевые показатели эффективности (например, коэффициент конверсии установок, ROI, ARPU, коэффициент лояльных пользователей) кампаний на странице обзорного дэшборда.

Метод 2: A/B-тестирование в нескольких медиа-источниках

Настройка:

  1. Выберите параметр подписчика, чтобы сохранить значение варианта.
    Например, для тестирования двух вариантов текста CTA вы можете использовать af_sub1=«Установить сейчас» или af_sub1=«Установите». Подробнее о параметрах подписчиков и примере тестирования креатива здесь.
  2. Добавьте параметр подписчика с соответствующим значением к каждой активной ссылке атрибуции.
  3. Во всех кампаниях рекомендуется использовать одни и те же креативы, за исключением протестированного варианта.

Анализ:

  1. Скачайте отчеты с сырыми данными по установкам или внутренним событиям приложения. Используйте столбец с выбранным параметром подписчика для фильтрации и сортировки данных.
  2. Сравните результативность креативов с любым из двух сохраненных значений.

A/B-тестирование, размещение рекламы в мобильном интернете

ad_placement.png

Расположение баннеров для ваших приложений на мобильных сайтах может существенно повлиять на коэффициент конверсии пользователей. В большинстве случаев рекламодатели используют собственные мобильные веб-сайты для конверсии посетителей в мобильных пользователей.

С помощью функции смарт-баннеров AppsFlyer вы можете быстро и легко настроить мобильные веб-баннеры. Кроме того, эта функция также позволяет легко проводить A/B-тесты, чтобы определить наилучшее место для конверсии посетителей веб-сайта в мобильных пользователей.

Настройка:

  1. Внедрите смарт-баннеры на своем мобильном сайте.

  2. Для каждого нового посетителя определите, показывать ли баннер вверху или внизу страницы. Обязательно разделите трафик 50/50 между ними.
    Совет разработчика. Простой способ разделения трафика на вашем сайте — использовать счетчик посетителей, а затем проверить, является ли значение счетчика нечетным (вариант A) или четным (вариант B) для каждого нового посетителя.

  3. Задайте местоположение баннера и ссылку атрибуции в соответствии с заданным местоположением, используя API ShowBanner в SDK смарт-баннера.
    Пример: 
    showBanner({ bannerContainerQuery: "#document.body", additionalParams:{ af_sub5: "top"}})

Анализ:

  1. Скачайте отчеты с сырыми данными по установкам или внутренним событиям приложения. Используйте столбец с выбранным параметром подписчика (например, af_sub5) для фильтрации и сортировки данных.
  2. Сравните эффективность двух рекламных площадок, то есть какое место размещения принесло больше установок или событий после установки.

A/B-тестирование медиа-источников

AppsFlyer был создан для того, чтобы помочь рекламодателям определить наиболее эффективные (и худшие) медиа-источники для своих приложений. Однако если рекламодатели не смогут правильно сравнить медиа-источники, они рискуют сделать неверные выводы о качестве трафика.

Настройка:

  1. Создайте один рекламный креатив для ОБОИХ медиа-источников.
  2. Определите объявление для каждого медиа-источника с одинаковыми точными параметрами таргетинга аудитории.
  3. Вы можете отправлять разные объемы трафика на два медиа-источника.

Анализ:

  1. Если в обоих медиа-источниках показываются только тестируемые объявления, используйте дэшборд и данные AppsFlyer, чтобы легко сравнить ключевые KPI между двумя источниками.

    В противном случае:
  2. Перейдите к отчету AppsFlyer об удержании, когортному отчету, Master API или сводной таблице.
  3. Сгруппируйте по Медиа-источник -> Кампания -> Набор объявлений -> Объявление.
  4. Сравните ключевые показатели эффективности, чтобы определить наиболее эффективный медиа-источник.

Пример

  • 1 и 2 — это разные объявления в одном медиа-источнике. Сравните для них один KPI, например, коэффициент удержания за четвертый день с результатами A/B-тестирования креатива, таргетингом или размещением рекламы.
  • 2 и 3 — это объявления в разных медиа-источниках. Если креатив и таргетинг рекламы идентичны, сравнение одного KPI позволяет провести A/B-тестирование медиа-источника.

Использование разделения аудиторий для удобного A/B-тестирования медиа-источников

Если вы установите одинаковые параметры таргетинга для каждого медиа-источника, тест будет учитывать возможности сетей по таргетингу. При A/B-тестировании лучше каждый раз тестировать один вариант. В результате при A/B-тестировании других факторов производительности сетей целесообразно устранять различия в возможностях таргетинга.

Для этого мы рекомендуем распределять аудиторию случайным образом и ориентироваться на обе аудитории с одним и тем же креативом в каждой протестированной сети. AppsFlyer предлагает простой способ определения, разделения и автоматического распределения аудиторий между различными медиа-источниками. Прочтите об этом здесь.