재작년 여름, 어느 사무실 회의실에 앉아 있던 오후를 기억합니다. 블라인드 사이로 햇빛이 길게 들어와 테이블 위에 줄무늬를 만들고 있었고, 프로젝터에서는 3개월치 광고 성과 대시보드가 띄워져 있었습니다. 숫자들이 화면에 가득했습니다. 노출, 클릭, 전환, 비용. 그런데 그 방에 있던 누구도 그 숫자들을 보고 “그래서 성공인가 실패인가”를 말하지 못했습니다. 한참 침묵이 흐르다가 누군가 조심스럽게 물었습니다. “우리가 원래 뭘 확인하려던 거였죠?”
그 질문이 나온 순간, 저는 3개월이 통째로 사라졌다는 걸 알았습니다. 돈을 안 쓴 것도 아니고 일을 안 한 것도 아닌데, 손에 남은 게 없었습니다. 측정은 잔뜩 했는데 검증은 하나도 못 한 겁니다.
3개월이 짧은 게 아니라 비어 있는 것입니다
“3개월만 해 보고 결정하겠습니다.” 이 말 자체는 아주 합리적으로 들립니다. 무한정 돈을 쓸 수는 없으니 기한을 정하고 그 안에 판단하겠다는 뜻이니까요. 저는 이 태도를 좋아합니다. 문제는 그 문장 뒤에 따라와야 할 문장이 거의 늘 비어 있다는 점입니다. 무엇을 확인하면 계속하고, 무엇을 확인하면 접을 것인가. 이게 없으면 3개월 뒤에 남는 건 숫자 더미와 애매한 기분뿐입니다.
기분으로 판단하면 어떻게 될까요. 성과가 좋았던 마지막 2주가 기억에 남으면 계속하자는 쪽으로 기울고, 중간에 한 번 크게 삐끗한 기억이 강하면 접자는 쪽으로 기울죠. 3개월을 썼는데 결론은 결국 인상에 좌우되는 겁니다. 그럴 거면 처음부터 한 달만 해도 됐을 일입니다.
짧은 기간이 정직하게 알려 주는 것들
오해가 없도록 분명히 해 두고 싶습니다. 저는 짧은 테스트가 무의미하다고 생각하지 않습니다. 오히려 3개월이라도 제대로 설계하면 알아낼 수 있는 게 꽤 많습니다.
예를 들어 사람들이 우리 메시지 중 어떤 문장에 멈춰 서는지는 비교적 빨리 드러납니다. 광고 소재 몇 개를 나란히 돌려 보면 반응 차이가 금방 보이니까요. 어떤 검색어로 우리를 찾아오는지, 페이지에 들어와서 어디쯤에서 나가는지, 장바구니까지 왔다가 왜 멈추는지도 짧은 기간에 꽤 선명하게 보입니다. 이런 건 “지금 우리가 하는 말이 통하는가”에 대한 답이고, 이 답은 빨리 나올수록 좋습니다.
반면 짧은 기간이 절대 답해 주지 못하는 것도 있습니다. 이 브랜드가 시장에 자리를 잡을 수 있는가, 재구매가 일어나는 제품인가, 검색에서 우리 이름이 쌓이는 속도가 어떤가 같은 것들이죠. 이런 건 성격상 시간이 물리적으로 필요합니다. 재구매 주기가 두 달인 제품이라면 3개월 안에 재구매 데이터는 겨우 한 사이클입니다. 한 사이클은 데이터가 아니라 일화에 가깝습니다.
그러니 문제는 3개월이 짧으냐 기냐가 아닙니다. 이 3개월에 어떤 질문을 얹느냐입니다. 빨리 답이 나오는 질문을 얹으면 3개월은 충분하고, 시간이 필요한 질문을 얹으면 3개월은 처음부터 답이 나올 수 없는 설계입니다.
초반 두 달은 대개 기계가 배우는 시간입니다
여기에 한 가지 현실적인 사정이 더 붙습니다. 광고 계정이든 검색 노출이든, 시작 직후의 성과는 그 자체로 실력이 아닙니다. 계정을 열고, 추적을 붙이고, 소재를 올리고, 플랫폼이 우리 고객이 누구인지 익히는 기간이 앞에 놓여 있습니다. 이 구간의 숫자는 “이 마케팅이 되느냐”를 보여 주는 게 아니라 “세팅이 제대로 됐느냐”를 보여 줍니다.
저는 이걸 새 자전거에 비유하곤 합니다. 자전거를 처음 받아서 안장 높이 맞추고, 브레이크 당겨 보고, 동네 한 바퀴 돌아 보는 시간이 있죠. 그 한 바퀴의 속도를 재서 “이 자전거로는 멀리 못 가겠다”고 결론 내리는 사람은 없습니다. 그런데 마케팅에서는 그 결론이 꽤 자주 내려집니다. 초반의 흔들리는 숫자를 실력으로 읽어 버리는 겁니다.
그래서 기간을 정할 때는 “이 중 얼마가 배우는 시간인가”를 먼저 떼어 놓고 봐야 합니다. 3개월 중 세팅과 학습에 앞부분이 들어간다면, 판단의 근거가 되는 구간은 생각보다 훨씬 짧습니다. 그 사실을 알고 시작하는 것과 모르고 시작하는 것은 완전히 다릅니다.
테스트라면, 접는 조건까지 미리 정해야 합니다
제가 요즘 가장 먼저 여쭙는 건 기간이 아니라 이겁니다. 3개월 뒤에 어떤 숫자를 보면 계속하실 건가요, 그리고 어떤 숫자를 보면 그만두실 건가요. 이 두 가지를 시작 전에 종이에 적어 두면 3개월의 성격이 완전히 바뀝니다.
계속할 조건만 정하는 분들이 많습니다. 하지만 접을 조건이 없는 테스트는 테스트가 아니라 그냥 지출입니다. 접는 선이 그어져 있어야 중간에 흔들릴 때 붙잡을 것이 생기고, 반대로 선을 넘었을 때 “이건 계속해도 되는 상황”이라고 자신 있게 말할 수 있습니다. 사실 이 선은 마케팅 담당자를 지켜 주는 장치이기도 하고, 돈을 내는 쪽을 지켜 주는 장치이기도 합니다. 양쪽 다 근거 없이 판단하지 않아도 되니까요.
그리고 질문은 구체적일수록 좋습니다. “매출이 오르는가”는 사실 질문이 아닙니다. 너무 많은 것이 섞여 있어서 3개월 뒤에도 답할 수 없습니다. 대신 이렇게 쪼개 보면 답할 수 있는 질문이 됩니다. 우리가 가장 유력하다고 본 고객군이 실제로 반응하는가. 우리가 밀기로 한 메시지가 다른 메시지보다 잘 먹히는가. 첫 구매까지 가는 길에서 사람들이 가장 많이 이탈하는 지점이 어디인가. 하나하나는 소박해 보이지만, 이 세 가지에 답이 나오면 다음 3개월은 완전히 다른 출발선에서 시작합니다.
기간은 그릇이고, 질문은 담기는 것입니다
돌이켜 보면 잘 굴러갔던 프로젝트들에는 공통점이 하나 있었습니다. 기간이 길어서가 아니라, 시작할 때 “이번에 우리가 알아내려는 건 이거다”라는 문장이 한 줄 있었다는 점입니다. 그 한 줄이 있으면 중간에 숫자가 출렁여도 방향을 잃지 않습니다. 매주 보는 지표도 달라지고, 소재를 만드는 기준도 달라집니다. 3개월이 지나면 성공이든 실패든 분명한 답 하나를 손에 쥐게 됩니다. 실패라 해도 그건 낭비가 아니라 지워진 선택지 하나입니다.
반대로 질문 없이 시작한 3개월은, 아무리 성실하게 일해도 결론이 나지 않습니다. 열심히 물을 부었는데 그릇이 없었던 셈이니까요.
그러니 “3개월만 해 보고 결정하겠다”는 말을 들으면 저는 이제 기간을 흥정하지 않습니다. 대신 이렇게 여쭙습니다. 그 3개월 끝에 어떤 문장으로 답을 하고 싶으신가요. 그 문장이 정해지면 필요한 기간은 저절로 따라옵니다. 검증이란 결국 시간을 쓰는 일이 아니라, 무엇을 알고 싶은지 먼저 아는 일이더군요.