데이터의 함정에서 벗어나, 고객을 읽어라

미리보기

당신은 어제 10만 명이 본 캠페인의 클릭률이 3.8%였다는 보고서를 보며 고개를 끄덕였습니다. 괜찮은 수치입니다. 업계 평균보다 높습니다. 그래서 당신은 추가 예산을 승인했습니다. 그런데 그 10만 명 중 정작 실제로 물건을 산 사람은 47명이었고, 그중 40명은 환불했습니다. 숫자는 거짓말을 하지 않지만, 숫자가 말하는 방식은 언제나 당신을 속입니다. 이 장에서는 데이터가 보여주는 것과 현실이 다른 지점을 파고듭니다. 평균이 어떻게 당신을 무장해제시키는지, 과거의 성공이 어떻게 미래의 함정이 되는지, 그리고 모든 지표가 완벽한데도 고객이 떠나는 순간이 왜 존재하는지 이야기합니다. ## 신뢰구간의 함정과 평균의 배신 당신의 전환율이 2.1%라고 가정해 봅시다. 좋아 보입니다. 하지만 그 숫자는 단순히 "평균"일 뿐입니다. A/B 테스트에서 2.1%와 2.3%의 차이는 유의미할까요? 대부분의 마케터는 이 차이를 보고 "B가 더 낫다"고 말하지만, 신뢰구간을 계산해 보면 두 값이 사실상 겹칩니다. 즉, 당신이 본 차이는 우연일 가능성이 높습니다. 평균은 이상치에 의해 왜곡됩니다. 10명의 고객 중 1명이 100만 원을 쓰고 나머지 9명이 1만 원을 쓴다면, 평균 고객 가치는 10만 9천 원입니다.