지금 읽는 곳왜 DOOH는 온라인처럼 클릭으로 효과를 잴 수 없나목차
STEP 3 고급·전략 › 3-2. 프로그래매틱 핵심 원리·거시 데이터 분석 › 과목 110 › 레슨 07
크로스 미디어 리프트 실험 설계: DOOH 광고 송출 구역 내 유저의 모바일 포털 브랜드 검색량 스파이크(Geofencing Lift 분석) 통계적 검증
DOOH는 클릭이 없는 매체라 '봤다'와 '효과가 있었다'를 구분하려면 별도의 실험 설계가 필요합니다.
핵심요약
- DOOH 리프트 측정은 광고에 노출된 지오펜스 안 디바이스군과, 노출되지 않은 비슷한 특성의 대조군(control group)을 비교하는 방식으로 이뤄진다
- 지오펜스 안에 있었다는 사실이 실제로 화면을 봤다는 것을 보장하지 않으므로, 측정은 확률적 모델로 주의(attention)를 추정하는 한계를 갖는다
- 통계적으로 유의미한 결과를 얻으려면 통상 수십만 건 이상의 노출 규모가 필요한 것으로 통칭되며, 캠페인 규모가 작으면 결과의 신뢰도가 떨어질 수 있다
- 브랜드 검색량 스파이크를 리프트 지표로 쓸 때는 노출 시점과 검색 발생 시점 사이의 시차, 그리고 다른 마케팅 활동과의 중첩 여부를 함께 통제해야 한다
왜 DOOH는 온라인처럼 클릭으로 효과를 잴 수 없나
온라인 광고는 클릭·전환이라는 직접적인 행동 데이터가 남지만, DOOH는 스크린을 보는 행위 자체가 클릭 같은 로그를 남기지 않습니다. 그래서 DOOH의 효과를 검증하려면 '광고가 노출된 구역의 사람들이 노출되지 않은 사람들보다 이후 다르게 행동했는가'를 간접적으로 비교하는 실험 설계가 필요합니다. 크로스 미디어 리프트 실험은 이 간접 비교를 체계화한 방법론이며, 그중 모바일 포털 브랜드 검색량 스파이크를 지표로 쓰는 방식이 실무에서 자주 언급됩니다.
노출군과 대조군은 어떻게 나누나
측정 방법론에서는 먼저 DOOH 스크린을 중심으로 지오펜스를 설정해 그 안에 있었던 디바이스를 노출군으로 식별합니다. 그다음 노출군과 지리적으로 비슷한 지역에 있었지만 실제로는 그 지오펜스 안에 들어오지 않아 광고에 노출되지 않은 디바이스로 대조군을 구성합니다. 이렇게 인구·행동 특성이 비슷하지만 노출 여부만 다른 두 집단을 비교하면, 다른 변수(계절성, 전반적 시장 트렌드 등)의 영향을 어느 정도 배제하고 광고 노출 자체의 순수한 효과를 추정할 수 있습니다.
지오펜스 안에 있었다고 해서 봤다는 뜻은 아니다
이 실험 설계의 핵심 한계는, 지오펜스 안에 있었다는 사실이 실제로 그 사람이 스크린을 쳐다봤다는 것을 보장하지 않는다는 점입니다. 스크린을 등지고 걸어갔거나, 스마트폰을 보느라 시선이 다른 곳에 있었을 수도 있습니다. 그래서 측정 시스템은 실제 시청 여부를 확률적 모델로 추정하며, 이는 사용자 한 명 한 명의 클릭이 정확히 기록되는 온라인 채널과 비교했을 때 태생적으로 더 큰 불확실성을 안고 있는 방식입니다. 이 한계를 인지하지 못하고 리프트 수치를 온라인 전환율만큼 정밀한 것으로 취급하면 성과 해석에서 과신하는 오류가 생깁니다.
브랜드 검색량 스파이크를 지표로 쓸 때 통제해야 할 것
브랜드 검색량 스파이크를 리프트 지표로 삼을 때는 두 가지를 반드시 함께 확인해야 합니다. 첫째, DOOH 노출 시점과 검색 발생 시점 사이의 시차입니다 — 사람들이 광고를 본 즉시 검색하지 않고 몇 시간 뒤나 다음 날 검색할 수도 있으므로, 리프트를 관찰하는 시간 창(window)을 너무 짧게 잡으면 실제 효과를 놓칠 수 있습니다. 둘째, 같은 시기에 진행된 다른 마케팅 활동(TV 광고, SNS 캠페인, 프로모션 등)과의 중첩입니다. 이런 다른 활동이 겹쳐 있으면 검색량 스파이크가 DOOH만의 순수한 효과인지 판단하기 어려워지므로, 가능하면 다른 채널 활동이 없는 기간이나 지역을 대조군으로 잡는 실험 설계가 신뢰도를 높입니다.
실험 규모는 얼마나 커야 신뢰할 수 있나
통계적으로 유의미한 결과를 얻으려면 통상 수십만 건 이상의 노출 규모가 필요한 것으로 업계 방법론 자료에서 통칭됩니다. 이는 고정된 기준값이 아니라 캠페인 규모·전환율에 따라 달라지는 대략적인 가이드이지만, 소규모 지면 한두 개로 짧은 기간만 집행한 캠페인의 리프트 결과를 전사적 의사결정의 근거로 확대 해석하는 것은 위험하다는 점을 시사합니다. 실험 결과를 보고할 때는 표본 규모와 신뢰구간을 함께 명시해, 결과가 우연에 의한 변동인지 실제 효과인지 구분할 수 있도록 하는 것이 정확한 커뮤니케이션입니다.
지역 대조군 대신 기간 대조군을 쓸 수도 있다
지오펜스 기반 지역 대조군을 구성하기 어려운 상황(예: 지면이 하나뿐이라 비교할 다른 구역이 마땅치 않은 경우)이라면, 같은 지역을 대상으로 캠페인 집행 전 기간과 집행 중 기간을 비교하는 기간 대조군 방식도 대안으로 쓰입니다. 다만 이 방식은 계절성이나 특정 시점의 다른 이벤트(연휴, 프로모션 시즌 등)가 섞여 들어올 위험이 지역 대조군보다 커서, 가능하면 전년 동기 데이터까지 함께 참고해 계절성 영향을 보정하는 절차가 필요합니다. 지역 대조군과 기간 대조군을 동시에 확보할 수 있다면 두 방식을 교차 검증하는 것이 가장 신뢰도 높은 설계입니다.
결과를 해석할 때 흔히 하는 실수
리프트 실험 결과를 해석할 때 자주 나오는 실수는 상관관계를 인과관계로 단정하는 것입니다. 노출군의 검색량이 대조군보다 높게 나왔다고 해서 그 차이 전부가 DOOH 광고 때문이라고 단정하기 전에, 애초에 노출군이 대조군과 인구·소비 특성이 정말 비슷했는지부터 재확인해야 합니다. 대조군 구성이 허술하면 아무리 표본이 커도 결과의 신뢰도는 떨어집니다.