한눈에 보기: 귀사의 리마케팅 캠페인의 실제 영향을 파악하기 위해 성과 증분 측정 솔루션 시험을 실행해 보세요.
실험에 대하여
성과 증분 측정 테스트는 귀사의 캠페인이 가져온 실제 영향을 A\/B 테스트로 정확히 측정하여 "성과 증가분"—리마케팅 캠페인 결과로 발생한 전환과 그 외에 발생했을 전환 간의 차이를 확인합니다.
결과는 귀사의 마케팅 투자로 발생한 실제 가치를 이해하는 데 매우 중요합니다. 성과 증분 측정 테스트를 통해 특정 채널과 캠페인의 영향을 객관적으로 파악하여 예산 배분 및 캠페인 최적화에 대한 보다 나은 결정을 내릴 수 있습니다.
앱스플라이어는 잠재 오디언스 생성 시점부터 시작하는 자동화된 프로세스로 성과 증분 측정 테스트를 쉽게 수행할 수 있게 지원합니다. 새 오디언스는 활성화된 "증분적 영향 측정" 토글을 통해 연결된 매체 파트너와 통제군 간에 자동으로 분할됩니다. 통제군은 파트너로부터 배제된 오디언스의 일부로, 시험에 필수적인 요소입니다. 오디언스가 저장되면 성과 증분 측정 솔루션 실험이 자동으로 생성됩니다. 파트너 측에서 귀사의 캠페인을 시작하고 올바른 캠페인이 연결되었는지 확인한 후, 성과 증분 측정 대시보드에서 실험 결과를 볼 수 있습니다.
시작하기
성과 증분 측정 테스트를 시작하려면 다음 단계를 따라하세요. 각 단계에 대한 추가적인 세부 사항은 아래의 실험 설정을 참고하세요.
| 단계 | |
|---|---|
| 1 |
명확한 시험 목표와 결과에 대한 가설을 정의하여 귀사의 실험 결과의 실행 가능성을 극대화하세요. |
| 2 |
오디언스에서:
|
| 3 |
실험군은 광고에 노출됩니다. 통제군은 그렇지 않습니다. |
| 4 |
적절하게 진행된 성과 증분 측정 시험을 통해 얻은 데이터 인사이트는 마케팅 캠페인을 최적화하여 최대의 긍정적 영향을 미치는 데에 활용할 수 있습니다. 예를 들어, 타겟 오디언스를 위한 최상의 메시징, 광고 소재나 프로모션, 가장 효과적인 미디어 소스를 선정하는 데 도움이 될 수 있습니다. |
시험 설정
귀사의 시험 목표를 명확히 하세요
모든 시험에서 중요한 것은 시험하는 것(변수)과 예상 결과(가설)를 명확히 정의하는 것입니다. 다음 표에서는 시험 설계를 위한 지침과 모범 사례를 제공합니다.
| Variables\/가설 | 지침 및 모범 사례 |
|---|---|
| 오디언스 | 시험할 오디언스를 설명하세요. 앱스플라이어 오디언스에 이미 설정된 오디언스를 선택하거나, 시험 기준에 맞는 새로운 오디언스를 만드세요. |
| 오디언스 규모 |
사용자 기반이 크고 전환율이 높은 이벤트를 가진 오디언스를 선택하세요. 표본 크기가 클수록 통계적으로 유의미한 결과를 얻을 가능성이 높습니다.
모범 사례: 최소 5만 명의 오디언스를 1~3개의 광고 네트워크와 통제군으로 나누세요. |
| 캠페인 | 캠페인 (메시징, 인센티브 등)을 설명하세요. |
| 통제군 비율 | 통제군은 자동으로 오디언스 크기의 15%로 설정됩니다(모범 사례는 15%에서 25% 사이입니다). |
| 실험군 |
시험할 광고 네트워크를 판단하세요. 분할 비율은 네트워크 간에 균등하게 나눠집니다(하지만 각자에게 배정할 오디언스의 비율은 조정할 수 있습니다).
모범 사례: 1~3개의 광고 네트워크 |
| 가설 |
실험의 예상 결과를 정의합니다. 실험을 시작하기 전에 결과를 예측하는 것이 다소 직관에 반할 수 있지만, 가설을 세우는 것은 실험 설계의 중요한 요소입니다. 이는 결과를 해석하는 데 도움이 됩니다. 모범 사례: 모호한 추정치 대신 실제 백분율을 사용하여 쉽게 검증 가능한 가설을 제시합니다. 예를 들어:
|
예
위에서 설명한 지침을 사용하면 다음과 같은 실험을 정의할 수 있습니다.
| Variables\/가설 | 예 |
|---|---|
| 오디언스 | 등록을 완료했지만 구매를 하지 않은 사용자 |
| 오디언스 규모 | 100,000 |
| 캠페인 | 특정 기간 동안 구매하는 사용자에게 할인 쿠폰을 제공하는 캠페인 |
| 통제군 비율 | 오디언스 규모의 15% |
| 실험군 |
남은 오디언스를 다음과 같이 분배하세요:
|
| 가설 | 리마케팅 캠페인에 (유저를 앱에) 참여시키고 구매를 한 실험군 사용자의 비율이 통제군 사용자보다 10% 더 높을 것입니다. |
타겟 오디언스를 만들고 그룹을 분할하세요.
귀사의 목표를 정의한 후 다음 단계는 시험할 오디언스를 구성하는 것입니다.
- 앱스플라이어 오디언스에서 오디언스를 생성합니다(또는 실험 요구 사항을 충족하는 기존 오디언스를 분할할 수도 있습니다).
- 선택한 오디언스의 연결 탭에서:
- 오디언스를 1~3개의 애드 네트워크 파트너와 연결하세요.
-
오디언스를 분할하는 토글이 활성화되어 있는지 확인하세요(성과 증분 측정 솔루션 구독자는 2023년 1월 11일 이후에 생성된 오디언스의 경우 자동으로 활성화됩니다). 그렇지 않은 경우, 토글을 클릭해서 활성화하세요.
- 통제군은 자동으로 15%로 설정됩니다(권장).
- 나머지 오디언스는 선택한 애드 네트워크 파트너 사이에 자동으로 균등하게 나뉩니다.
- 전체 분할 비율은 통제군을 포함하여 100%가 되어야 합니다.
분할이 활성화된 상태로 귀사의 오디언스를 저장하면 성과 증분 측정 솔루션이 자동으로 시작됩니다(성과 증분 측정 솔루션 구독자에게만 해당). 이러한 실험은 제목 앞에 접두사 "[자동]"을 붙여 성과 증분 측정 대시보드에서 볼 수 있습니다.
중요 참고사항:
- 실험이 운영되는 동안에는 오디언스 구성을 변경하지 마세요. 파트너, 오디언스 이름 또는 기타 설정을 변경하면 통계 분석에 오류가 발생할 수 있습니다.
모범 사례: 실험이 종료된 후에도 이전에 시험한 오디언스 정의를 변경하려면 먼저 오디언스를 복제하고 새 복사본에서 변경하세요. 이를 통해 성과 증분 측정 대시보드의 과거 데이터 무결성을 지속적으로 보장할 수 있습니다. - 기존 오디언스의 분할 및 파트너 구성을 수정하면 현재 성과 증분 측정 실험이 종료되고 새로운 실험이 생성됩니다.
-
오디언스 확장 기능을 확인하세요:
Meta Ads와 Google Ads에는 캠페인이 설정된 오디언스 목록 외부를 타겟팅하여 도달 범위를 확장할 수 있는 선택 기능이 있습니다. 이 기능이 켜져 있으면 성과 증분 측정 실험에 편향이 생겨 부정확한 결과가 나올 수 있습니다. 이 기능이 꺼져 있는지 확인하세요.
Meta Ads에서는 이 기능을 "Advantage 커스텀 오디언스"라고 합니다. 이 기능은 광고 세트 수준에서 나타나며 기본적으로 활성화되어 있습니다.
Google Ads에서는 이를 "잠재고객 확장"이라고 합니다.
캠페인을 시작하고 실험해보세요
다음 작업을 수행하세요:
1. 애드 네트워크에서 캠페인 구성
첫 번째 단계는 귀사의 사용자 오디언스를 타겟으로 하는 캠페인을 생성하고, 오디언스를 업로드하는 각 애드 네트워크에서 캠페인을 시작하는 것입니다.
- 중요! 정확한 시험 결과를 얻으려면, 캠페인을 구성하여 시험 대상 오디언스의 사용자만 타겟으로 삼고 다른 소스의 사용자는 포함하지 않도록 하세요.
- 테스트 대상 오디언스가 새로 생성된 오디언스일 경우, 해당 오디언스가 애드 네트워크 플랫폼에 표시되기까지 최대 24시간이 걸릴 수 있습니다.
2. 올바른 캠페인이 실험에 연결되어 있는지 확인하세요.
"성과 증분 측정" 토글이 활성화된 상태에서 새 오디언스를 생성하면 (또는 기존 오디언스에서 새로 활성화된 경우), 새로운 성과 증분 측정 실험이 자동으로 시작됩니다. 가장 관련 있는 캠페인이 자동으로 실험에 연결되지만, 원하는 경우 캠페인을 변경할 수 있습니다.
캠페인을 연결/변경하려면:
1. 성과 증분 측정 솔루션 대시보드 > 특정 실험 > 실험 편집을 클릭합니다.
또는
오디언스에서 특정 오디언스를 찾아 성과 증분 측정 열에서 + 캠페인 연결을 클릭합니다.
캠페인을 연결할 수 있는 기간이 표시됩니다.
2. 각 애드 네트워크에 맞는 캠페인을 선택하세요.
참고: 드롭다운 메뉴에는 매체사에서 가져온 캠페인이 표시됩니다. 데이터가 제공되면 드롭다운의 캠페인은 특정 오디언스를 겨냥한 마케팅에 사용될 가능성에 따라 정렬됩니다. 가장 위의 제안이 미리 선택되어 있을 것입니다.
3. 저장을 클릭합니다.
이제 캠페인이 실험과 연결되었습니다.
수동으로 실험 생성하기
2023년 1월 11일 이후에 귀사의 오디언스를 생성한 성과 증분 측정 구독자라면 실험을 수동으로 만들 필요가 없습니다. 실험은 자동으로 귀사의 오디언스를 위해 생성되며, 성과 증분 측정 대시보드에 "[자동]"이라는 제목과 함께 표시됩니다. 오래된 오디언스에 대해 수동 실험을 생성하거나 다른 이유가 있는 경우, 다음 단계를 따르세요.
새로운 성과 증분 측정 실험을 수동으로 생성하려면:
- 앱스플라이어의 사이드 메뉴에서 최적화 > 성과 증분 측정을 선택하세요.
- 성과 증분 측정 실험 페이지에서 New 실험 버튼을 클릭합니다.
-
마법사의 지시에 따라 실험을 만드세요. 각 단계마다 상세한 지침이 제공됩니다.
참고 사항
마법사 단계 2 – 오디언스 설정
마법사의 2단계에서는 실험에 포함할 오디언스의 시작 날짜를 선택하라는 안내가 나옵니다.
기본적으로 이는 오디언스가 처음으로 통제군과 나누어진 날짜입니다. 정확한 실험 결과를 위해, 아래 경우에 해당하면 날짜를 변경하세요:
- 선택한 오디언스의 정의를 변경한 경우( 오디언스 세분화 규칙, 유저 식별자 등) → 이 날짜를 정의 변경이 이루어진 최신 날짜로 변경하세요.
- 기존 오디언스를 대상으로 New 캠페인을 테스트 중인 경우 → 이 날짜를 New 캠페인 시작 날짜로 변경하세요.
마법사 단계 3 - 목표 설정
여기에서 타겟 앱과 KPI를 선택하세요.
참고: 선택하지 않은 다른 KPI도 실험 종료 시 사용할 수 있습니다.
마법사 단계 4 – 검토
마법사의 4단계에서는 실험 기간을 설정하라는 안내가 나옵니다.
- 기본적으로 실험은 생성 후 30일 동안 실험되도록 설정됩니다. 이는 실험 운영에 권장되는 최소 기간입니다.
- 실험을 계속 운영할 경우 무기한으로 실험 계속 옵션을 선택하세요.
결과 분석
초기 실험 결과는 광고 네트워크에서 캠페인 시작 후 약 48시간 후에 성과 증분 측정 솔루션, Incrementality 대시보드에서 확인할 수 있습니다(업데이트 매일). 실험 페이지에서 결과의 정확성을 저해할 수 있는 문제를 식별하고 이를 해결하기 위한 조치를 받을 수 있는 알림을 볼 수 있습니다.
성과 증분 측정 로데이터 리포트는 데이터 락커에서 이용 가능합니다.