두 순위를 무엇으로 정의할 것인가

무신사 상품광고는 고객의 검색·구매·좋아요·장바구니 행동 데이터를 머신러닝으로 분석해 구매 가능성이 높은 고객에게 상품을 추천하고, 클릭이 일어났을 때만 과금되며 설정한 최대 클릭비용 안에서 광고비가 산정되는 구조입니다. 광고 계정은 별도 신청 없이 자동 지급되고, 파트너 어드민의 성장 솔루션 메뉴 안에서 운영합니다.

분석에 쓸 두 변수를 먼저 확정합니다. 광고 쪽 변수는 콘솔에서 그대로 나오는 값을 씁니다. 노출수, 클릭수, 클릭당 비용, 그리고 상품별 순위 관련 지표가 제공된다면 그 값입니다. 오가닉 쪽 변수는 콘솔에 없습니다. 특정 검색어를 입력했을 때 자사 상품이 몇 번째에 나오는지를 직접 수집해야 합니다. 이 수집 규칙을 느슨하게 잡으면 그 뒤의 분석이 전부 무의미해집니다.

오가닉 순위는 어떤 조건으로 수집해야 하나

조건을 다섯 개 고정합니다. 검색어 목록, 수집 시각, 정렬 옵션, 접속 상태, 기기 유형입니다. 검색어는 브랜드명 한 개, 카테고리 대표어 두세 개, 상품 특성어 두세 개 정도로 좁게 시작합니다. 시각은 매일 같은 시간대로 고정합니다. 정렬 옵션이 기본값이 아닌 상태에서 수집하면 다른 화면을 보게 되므로 반드시 기록합니다.

접속 상태도 중요합니다. 로그인 상태에서는 개인화가 섞일 수 있으므로 비로그인 기준으로 통일하는 편이 비교에 유리합니다. 그리고 광고 지면과 오가닉 지면을 눈으로 구분해 기록해야 합니다. 광고 라벨이 붙은 자리를 오가닉 순위에 포함해 세면, 광고를 켰다는 이유만으로 순위가 올라간 것처럼 보이는 착시가 생깁니다.

시차를 어떻게 다뤄야 하나

같은 날짜끼리 두 변수를 비교하는 것으로는 부족합니다. 광고로 유입이 늘면 그 유입이 구매와 리뷰로 바뀌는 데 시간이 걸리고, 그 데이터가 랭킹 조건에 반영되는 데 또 시간이 걸립니다. 그래서 광고 지표를 며칠씩 밀어 놓고 오가닉 순위와 맞춰 보는 방식으로 관찰합니다. 밀어 보는 폭은 상품 카테고리의 배송·리뷰 작성 리듬에 맞춰 정합니다.

전환 지연 때문에 최근 며칠 데이터는 계속 채워지므로, 리포팅 버퍼를 정해 그 기간 데이터로는 결론을 내지 않는 규칙도 함께 둡니다. 관측 기간이 짧을수록 시차 분석은 우연한 패턴을 잡아낼 위험이 커지므로, 최소 4주 이상을 확보한 뒤에 해석합니다.

교란 변수로는 무엇을 표시해 두어야 하나

관측 달력에 사건을 표시해 두면 나중에 이상한 구간을 설명할 수 있습니다. 무신사는 입점 브랜드사에게 브랜드별 M-2월 판매수수료의 1%를 M월 무상 광고비로 지급하며, 지급 범위는 최소 10만원에서 최대 100만원, 매월 1일 0시 자동 지급, 지급월 말일 23시 59분 자동 소멸입니다. 이 구조 때문에 월초와 월말에 광고비 소진 패턴이 달라지는 브랜드가 많습니다. 이 리듬을 모른 채 월말 데이터를 보면 광고가 갑자기 효율적이 된 것처럼 읽힙니다.

그 밖에 표시해야 할 사건은 가격 변동, 쿠폰·기획전 참여, 신상품 입고, 품절, 리뷰 대량 유입입니다. 무신사는 브랜드사와 함께 운영하는 협력광고 플레이북을 파트너 센터로 공개하고 있는데, 협력광고 참여 기간도 별도 지면 노출이 겹치는 구간이므로 반드시 표시합니다.

상관이 보이면 무엇까지 말할 수 있나

상관은 두 값이 같이 움직였다는 사실까지만 말해 줍니다. 광고 집행이 오가닉 랭킹 산정에 직접 반영되는지는 무신사를 포함해 어느 플랫폼도 공개하지 않았습니다. 근거 있는 해석은 여기까지입니다. 광고로 초기 트래픽이 만들어지면 구매와 리뷰 데이터가 빨리 쌓이고, 그 데이터가 랭킹 조건을 앞당겨 충족시키면서 오가닉 노출이 함께 개선되는 것처럼 보인다는 것입니다.

그래서 결론 문장을 쓸 때 표현을 정확히 해야 합니다. '광고를 켜면 오가닉 순위가 오른다'가 아니라 '광고 집행 기간에 리뷰·판매 데이터 축적 속도가 빨라졌고, 같은 기간 오가닉 순위가 개선됐다'로 씁니다. 사내 보고서의 이 한 문장 차이가 다음 분기 예산 논리의 신뢰도를 결정합니다.

분석 결과를 실행으로 바꾸는 절차는 무엇인가

검증 절차는 단순합니다. 변경 전 4주간 같은 요일·같은 시간대의 기준선을 확보하고, 한 번에 한 항목만 바꾼 뒤, 같은 요일끼리 비교해 판정합니다. 입찰가와 소재와 가격을 같은 주에 함께 바꾸면 무엇이 작동했는지 분리할 수 없습니다. 시즌성이나 경쟁사 프로모션이 겹치면 같은 요일 비교도 흔들리므로, 단일 실험 결과를 법칙처럼 일반화하지 않습니다.

실행으로 옮길 때는 검색어 단위로 좁히는 편이 낫습니다. 예를 들어 특정 카테고리 대표어에서만 광고 순위와 오가닉 순위가 함께 움직였다면, 그 검색어 그룹에 한정해 입찰을 조정하고 나머지는 기준선으로 남겨 대조군 역할을 하게 합니다.