앱스플라이어 A/B 테스트 가이드

대상:

마케터

마지막 업데이트: 2024년 10월 24일 11:22

한눈에 보기: 앱스플라이어를 사용하여 미디어소스, 캠페인, 크리에이티브, 타겟팅, 광고 배치에 대한 A/B 테스트를 수행할 수 있습니다.

A/B 테스트란?

A/B 테스트는 마케터가 광고 및 캠페인의 다양한 요소를 테스트하는 데 사용하는 방법입니다. 각 광고에는 잠재 사용자의 전환율에 영향을 줄 수 있는 요소(타게팅, 비주얼, 텍스트)가 포함되어 있습니다. 성과가 가장 좋은 광고 요소의 변형을 찾는 것은 모바일 마케팅 활동의 수익에 상당한 영향을 미칠 수 있습니다.

이 문서에서는 광고주가 앱스플라이어를 사용하여 A/B 테스트를 수행하여 가장 성과가 좋은 광고 요소를 찾는 방법을 설명합니다.

모바일 캠페인에 대한 A/B 테스트 방법

어떤 요소에 대해 A/B 테스트를 수행하려면 동일한 제안을 보여주는 두 소스 사이에서 모바일 트래픽을 50/50으로 분할하세요. 다음으로, 테스트할 요소의 두 가지 변형을 만듭니다. 충분한 트래픽이 통과한 후 기존 버전(대조군)의 결과를 새 버전(변형)과 비교할 수 있습니다.

다음 단계는 앱스플라이어를 사용하여 실행하는 A/B 테스트에 적용됩니다.

설정:

테스트할 요소를 선택합니다.
이 본문에서는 크리에이티브, 광고 배치, 미디어소스, 캠페인의 A/B 테스트에 대해 설명합니다.
두 개의 동일한 캠페인(또는 광고)을 만든 다음 광고 내의 단일 요소에 변화를 줍니다. 예를 들어 행동 유도 버튼 복사가 있습니다.
- 변형이 설치 전환율에 미치는 영향을 테스트하려면 두 캠페인 간에 트래픽을 균등하게 분할하세요.
  두 소스 모두에 대해 전체 노출 데이터를 사용할 수 있는 경우 설치 수를 노출 수로 나누어 설치 전환율을 계산합니다.
- 사용자 품질에 대한 변형의 영향을 테스트하려면 설치 후 두 캠페인에 서로 다른 양의 트래픽을 보낼 수 있습니다.
통계적 유의성에 도달할 수 있도록 각 캠페인에 충분한 트래픽을 유도해야 하는데, 이는 곧 캠페인당 50회 이상의 설치를 의미합니다. A/B 테스트 유의성 계산기를 사용합니다.

분석:

앱스플라이어의 대시보드와 데이터를 사용하여 두 캠페인 간의 주요 KPI 성과를 비교합니다.
가장 성과가 좋은 변형을 선택하여 라이브 캠페인에 사용합니다.

크리에이티브 A/B 테스트 및 타게팅

크리에이티브에는 카피, 이미지, 색상, 글꼴, 버튼 등 사용자 전환율에 다양한 영향을 미치는 많은 요소가 포함됩니다. 국가, 연령 또는 성별과 같은 타겟팅 파라미터도 전환율에 큰 영향을 미칠 수 있습니다. iOS 15 이상의 경우 최대 35개의 사용자 지정된 제품 페이지가 있을 수도 있습니다. 이러한 요소를 A/B 테스트하면 사용자 전환율 향상에 가장 큰 영향을 미치는 요소를 찾는 데 도움이 될 수 있습니다.

아래에서는 다음을 사용하여 A/B 테스트를 수행하는 두 가지 방법을 설명합니다.

단일 미디어소스
여러 미디어소스

방법	장점	단점
단일 미디어소스를 사용한 A/B 테스트	빠른 설정 설치 전환율을 테스트하기 쉬움	결과는 특정 미디어소스의 사용자에게만 적용될 수 있음 테스트하는 데 시간이 더 오래 걸릴 수 있음
여러 미디어소스에 대한 A/B 테스트	빠른 결과 결과가 모든 미디어소스의 사용자에게 적용됨	여러 위치에서 어트리뷰션 링크를 업데이트해야 함

방법 1: 단일 미디어소스를 사용한 A/B 테스트

설정:

트래픽이 충분한 신뢰받는 미디어소스를 선택합니다.
다음 방법 중 하나를 사용하여 앱스플라이어에서 두 개의 캠페인 또는 스마트 배너를 만듭니다.
- 어트리뷰션 링크에서 "c" 파라미터인 이름을 가진 캠페인을 변경합니다.
- 또는 캠페인 내에서 두 개의 광고 세트("af_adset=")를 만들거나 광고 세트 내에서 단일 광고("af_ad=")를 만들 수 있습니다. 참고: 스마트 배너에서 동일한 배너 그룹 내에서 각 배너에 대해 다른 파라미터를 입력하여 A/B 테스트를 수행할 수도 있습니다.
- iOS 15 이상의 경우, 서로 다른 제품 페이지에 서로 다른 원링크 URL을 전송하여 다양한 사용자 지정 제품 페이지의 효과를 테스트할 수도 있습니다. 더 알아보기
테스트된 변형을 제외하고 두 캠페인에서 동일한 크리에이티브를 사용합니다.
두 캠페인에 동일한 양의 트래픽을 전송합니다.

분석:

개요 대시보드 페이지에서 캠페인의 KPI(예: 설치 전환율, ROI, ARPU, 로열 유저 비율)를 비교합니다.

방법 2: 여러 미디어소스에 대한 A/B 테스트

설정:

변형 값을 보유할 구독자 파라미터를 선택합니다.
예를 들어 2개의 CTA 텍스트 변형을 테스트하려면 af_sub1="install now" 또는 af_sub1="please install"을 사용할 수 있습니다. 여기에서 구독자 파라미터와 크리에이티브 테스트 예시에 대해 자세히 알아보세요.
일치하는 값을 가진 구독자 파라미터를 모든 라이브 어트리뷰션 링크에 추가합니다.
테스트된 변형을 제외한 모든 캠페인에서 동일한 크리에이티브를 사용하는 것이 좋습니다.

분석:

설치 또는 인앱 이벤트 로데이터 리포트를 다운로드합니다. 선택한 구독자 파라미터 열을 사용하여 데이터를 필터링하고 정렬합니다.
크리에이티브의 성과를 저장된 2개의 값 중 하나와 비교합니다.

모바일 웹에서 광고 배치 A/B 테스트

모바일 웹사이트에서 앱 배너의 위치는 사용자 전환율에 상당한 영향을 미칠 수 있습니다. 대부분의 경우 광고주는 방문자를 모바일 사용자로 전환하기 위해 자체 모바일 웹사이트를 사용합니다.

앱스플라이어 스마트 배너 기능으로 모바일 웹 배너를 빠르고 쉽게 설정할 수 있습니다. 또한 이 기능을 사용하면 A/B 테스트를 쉽게 실행하여 웹사이트 방문자를 모바일 사용자로 전환하기 위한 최적의 배치를 결정할 수 있습니다.

설정:

모바일 웹사이트에 스마트 배너를 구현합니다.
각각의 새 방문자에 대해 페이지 상단 또는 하단에 배너를 표시할지 여부를 결정합니다. 둘 사이에 트래픽을 50/50으로 분할해야 합니다.
개발자 팁 - 웹사이트 트래픽을 분할하는 간단한 방법은 방문자 카운터를 사용한 다음, 각각의 신규 방문자에 대해 카운터 값이 홀수(옵션 A)인지 짝수(옵션 B)인지 확인하는 것입니다.
스마트 배너의 SDK API ShowBanner를 사용하여 결정된 위치에 따라 배너 위치와 어트리뷰션 링크를 설정합니다.
예:
```
showBanner({ bannerContainerQuery: "#document.body", additionalParams:{ af_sub5: "top"}})
```

분석:

설치 또는 인앱 이벤트에 대한 로데이터 리포트를 다운로드하세요. 선택한 구독자 파라미터(예: af_sub5) 열을 사용하여 데이터를 필터링하고 정렬합니다.
두 광고 배치의 성과, 즉 더 많은 설치 또는 설치 후 이벤트를 받은 배치를 비교해 보세요.

미디어소스 A/B 테스트

광고주가 앱에 대해 최상 또는 최악의 성과를 내는 미디어소스를 식별하도록 돕는 것이 앱스플라이어를 만든 목적입니다. 하지만 광고주가 미디어소스를 올바르게 비교하지 못하면 트래픽 품질에 대한 잘못된 결론에 도달할 위험이 있습니다.

설정:

두 미디어소스 모두에 대해 하나의 광고 크리에이티브를 만듭니다.
각 미디어소스에 대해 정확히 동일한 오디언스 타겟팅 파라미터를 사용하여 광고를 정의합니다.
2개의 미디어소스에 서로 다른 양의 트래픽을 보낼 수 있습니다.

분석:

테스트 중인 광고가 오직 하나만 두 미디어소스에서 모두에서 실행되는 경우 앱스플라이어의 대시보드와 데이터를 사용하여 두 소스 간의 주요 KPI를 쉽게 비교할 수 있습니다.

그렇지 않으면 다음과 같이 하세요.
앱스플라이어의 리텐션 리포트, 코호트 리포트, 마스터 API 또는 피벗 테이블로 이동합니다.
미디어소스별 그룹화 -> 캠페인 -> 광고 세트 -> 광고.
KPI를 비교하여 성과가 가장 좋은 미디어소스를 식별합니다.

예시

1과 2는 동일한 미디어소스에 있는 서로 다른 광고입니다. 예를 들어 리텐션 4일 차 비율과 같은 단일 KPI를 A/B 테스트 크리에이티브, 타겟팅 또는 광고 배치와 비교합니다.
2와 3은 서로 다른 미디어소스의 광고입니다. 광고의 크리에이티브와 타겟팅이 동일한 경우 단일 KPI를 비교하면 미디어소스에 대한 A/B 테스트를 수행할 수 있습니다.

미디어소스의 간편한 A/B 테스트를 위해 오디언스 분할 사용

각 미디어소스에 대해 동일한 타겟팅 파라미터를 설정하면 테스트에 네트워크의 타겟팅 기능이 포함됩니다. A/B 테스트를 할 때는 매번 하나의 변형을 테스트하는 것이 가장 좋습니다. 따라서 네트워크 성능의 다른 요소를 A/B 테스트할 때 타겟팅 능력의 차이를 제거하는 것이 좋습니다.

이를 위해서는 오디언스를 무작위로 분할하고 테스트된 각 네트워크에서 동일한 크리에이티브로 두 오디언스를 모두 타겟팅하는 것이 좋습니다. 앱스플라이어는 다양한 미디어소스 간에 오디언스를 정의, 분할, 자동 분배하는 간편한 방법을 제공합니다. 여기에서 자세한 내용을 읽어보세요.