전환 데이터 급증 원인 진단 — 매크로/Fraud 여부를 로그 단위로 검증하기
검색광고 특화 종합 온라인 광고대행사가, 특정 키워드 광고를 통한 회원가입 급증 현상의 원인이 매크로(Fraud)인지 데이터 수집 오류인지를 로그 단위로 검증한 사례.
핵심 요약
- 지표가 급증할 때는 매크로/어뷰징 가설과 데이터 중복 수집(오류) 가설을 함께 나란히 검증해야 원인을 좁힐 수 있다
- 방문자 단위 로그 원자료까지 내려가야, '패턴이 비슷해 보이지만 실제로는 서로 다른 이벤트'를 구분해낼 수 있다
- 이상탐지 결과는 비전공자인 현업 담당자도 이해할 수 있는 보고서 형태로 전달되어야 실제 의사결정과 커뮤니케이션에 쓰인다
- 정합성 검증은 문제를 반드시 '해결'하지 못하더라도, 원인을 명확히 배제하거나 확정하는 것 자체로 조직의 신뢰를 회복시킨다
무엇이 문제였나
통신 그룹 계열의 종합 온라인 광고대행사로, 국내 검색광고(SA)에 특화해 전략 기획부터 크리에이티브 제작, 광고 집행, 미디어렙사 역할까지 수행하는 조직이었다. 광고 성과와 고객 행동 데이터는 BizSpring의 LOGGER™를 통해 수집되고 있었는데, 광고를 대행 중이던 음원 스트리밍 서비스에서 특정 키워드 광고를 통한 회원가입 전환 수가 어느 시점부터 채널 유입 대비 비정상적으로 급증하는 정황이 확인됐다.
과제
기존 추세와 다른 이상 징후를 데이터로 검증해야 했고, 마케팅 현업 담당자가 비전공자여도 이해할 수 있는 수준의 상세 진단 자료가 필요했다.
접근
- 스마트체크™ 컨설팅 프로세스를 적용해 수집 오류 여부와 사기성(Fraud) 행동 여부를 함께 점검
- 마케팅 담당자가 경험적으로 의심하는 원인을 사전에 전달받아 검토 방향에 반영
- 전환이 집중된 특정 키워드를 기준으로, 해당 키워드를 통한 전체 유입 데이터와 회원가입 완료 고객의 행동 데이터를 추출해 분석 설계
구축 내용
- 회원가입 전 유입 경로 및 행동 패턴을 분석해, 일부 특정 방문자에게서 매우 짧은 주기로 다수의 전환이 집중 발생함을 확인. 해당 방문자들의 이동 경로·행동 패턴은 어느 정도 유사했지만 완전히 동일하지는 않음을 확인
- 로그 단위 행동/전환 raw 데이터를 추출해, 동일 방문자가 서로 다른 패턴으로 회원가입을 여러 차례 완료했음을 정리하고, 검토 과정과 결과를 보고서 형태로 로그 데이터와 함께 제공
이 사례에서 배울 수 있는 것
- 지표가 급증할 때는 매크로/어뷰징 가설과 데이터 중복 수집(오류) 가설을 함께 나란히 검증해야 원인을 좁힐 수 있다
- 방문자 단위 로그 원자료까지 내려가야, '패턴이 비슷해 보이지만 실제로는 서로 다른 이벤트'를 구분해낼 수 있다
- 이상탐지 결과는 비전공자인 현업 담당자도 이해할 수 있는 보고서 형태로 전달되어야 실제 의사결정과 커뮤니케이션에 쓰인다
- 정합성 검증은 문제를 반드시 '해결'하지 못하더라도, 원인을 명확히 배제하거나 확정하는 것 자체로 조직의 신뢰를 회복시킨다
자주 묻는 질문
전환 데이터 급증 원인 진단 — 매크로/Fraud 여부를 로그 단위로 검증하기
검색광고 특화 종합 온라인 광고대행사가, 특정 키워드 광고를 통한 회원가입 급증 현상의 원인이 매크로(Fraud)인지 데이터 수집 오류인지를 로그 단위로 검증한 사례.