답변
마케팅 인력·외주 운영의 효과를 단순 상관관계가 아니라 증분 효과로 검증하려면 대조군을 두는 실험 설계가 필요합니다. 캠페인이 실제로 매출을 늘렸는지, 즉 증분 효과를 단순 상관관계와 구분해서 검증하는 가장 표준적인 방법은 홀드아웃(대조군) 테스트입니다. 타겟 대상 중 일부(지역·오디언스 세그먼트 단위)를 의도적으로 캠페인에서 제외하고, 노출된 집단과 제외된 집단의 실제 성과(매출·전환)를 비교하시면 됩니다. 두 집단이 캠페인 전에 비슷한 특성을 갖도록 무작위나 매칭으로 나누는 게 핵심인데, 이렇게 나누지 않으면 애초에 구매 성향이 높은 사람에게 광고가 더 많이 노출돼 효과가 과대평가되는 편향이 생깁니다. 개인 단위로 대조군을 나누기 어려운 상황, 예를 들어 브랜드 캠페인처럼 노출 범위를 개인별로 통제하기 힘든 경우에는 지역 단위로 캠페인을 켠 지역과 끈 지역을 나눠 비교하는 지역 실험(geo-lift test)이 대안이 됩니다. 이때 인구·소득·기존 매출 수준이 비슷한 지역끼리 짝지어야 비교가 왜곡되지 않습니다. 마케팅 인력·외주 운영은 내부 고정 인력·프로젝트 외주·대행사 리테이너를 업무 성격별로 섞는 하이브리드 구조가 일반적입니다 — 반복적·핵심 업무는 내부화하고, 변동이 크거나 전문성이 필요한 업무는 외주로 돌리는 식입니다. 마케팅 인력·외주 운영이라면 대상을 어떤 단위(개인·지역·세그먼트)로 나눌 수 있는지부터 판단하신 뒤 실험 설계에 들어가시길 권합니다.