지표를 바꾸는 순간 비교가 끊기기 쉽습니다
월간 보고를 몇 달 이어 가다 보면 처음에 정한 지표가 실무와 맞지 않는다는 사실을 알게 됩니다. 검색 유입을 보다가 안내 페이지 이용으로 바꾸거나, 반복 문의의 분류 방식을 고치는 일은 자연스러운 개선입니다. 문제는 바꾼 사실을 어디에도 적지 않았을 때 생깁니다.
세 달 뒤에 숫자가 크게 달라졌다면 담당자는 원인을 찾아야 합니다. 이때 콘텐츠를 고쳐서 달라진 것인지, 집계 기준이 바뀌어서 달라진 것인지 구분할 수 없으면 보고서의 숫자는 판단 근거가 되지 못합니다. 지표를 바꾸는 것보다 바꾼 기록이 없는 것이 더 큰 위험입니다.
그래서 지표를 정하는 일과 지표의 변경 이력을 남기는 일은 함께 다루는 편이 좋습니다. 많은 항목을 정교하게 설계하기보다, 적은 항목이라도 언제 어떤 기준으로 기록했는지가 남아 있어야 다음 달에 같은 방법으로 다시 볼 수 있습니다.
한 장의 변경 기록표에 담을 항목
변경 이력은 복잡한 문서일 필요가 없습니다. 스프레드시트 한 장에 몇 개의 열만 있으면 충분합니다. 기본적으로 필요한 항목은 변경한 날짜, 바꾼 지표의 이름, 이전 기준과 새 기준, 바꾼 이유, 그리고 새 기준으로 처음 집계하는 달입니다.
여기에 콘텐츠 수정 기록을 나란히 둡니다. 어느 주소의 어떤 문장이나 링크, 안내 경로를 고쳤는지 적어 두면 숫자의 변화를 콘텐츠 수정과 연결해 볼 수 있습니다. 같은 달에 여러 곳을 고쳤다면 어느 것이 영향을 주었는지 단정하기 어렵다는 점도 메모에 남깁니다.
마지막 열에는 다음 점검일을 둡니다. 변경 직후에는 데이터가 충분히 쌓이지 않았을 수 있으므로, 언제 다시 확인할지 미리 정해 두면 한두 번의 숫자로 성급히 결론을 내리는 일을 줄일 수 있습니다.
비교 기간은 같은 길이와 같은 조건으로 맞춥니다
기준이 바뀐 뒤의 숫자를 바뀌기 전과 곧바로 비교하면 오해가 생깁니다. 집계 방식이 달라졌다면 두 값은 단위가 다른 숫자일 수 있기 때문입니다. 가능하다면 새 기준을 이전 기간의 자료에도 적용해 보고, 그렇게 할 수 없다면 두 구간을 이어서 그리지 않고 구분해서 표시합니다.
비교 기간의 길이도 맞춥니다. 휴일이 많은 달과 그렇지 않은 달, 운영 시간이 달라진 주와 평소의 주는 문의와 방문 양상이 다를 수 있습니다. 같은 요일 구성과 비슷한 운영 조건을 가진 기간끼리 비교하는 것이 기본입니다.
광고를 통한 방문과 자연검색 방문은 성격이 다르므로 합치지 않고 따로 기록합니다. 광고 집행을 시작하거나 멈춘 달에는 합산 숫자가 크게 움직이기 때문에, 그 사실을 변경 기록표에 함께 적어 두어야 이후에 해석할 수 있습니다.
순위와 단기 변동은 단독 근거로 쓰지 않습니다
검색 순위는 시간, 기기, 위치와 검색 환경에 따라 달라질 수 있습니다. 하루나 이틀의 위치만 보고 콘텐츠가 효과를 냈다거나 실패했다고 판단하면 잘못된 수정을 반복하게 됩니다. 순위는 참고 자료로 두고, 팀이 실제로 확인할 수 있는 이동 경로와 문의 내용을 중심 지표로 삼는 편이 안정적입니다.
팀이 통제할 수 없는 변동 하나 때문에 원고 전체를 다시 쓰는 것도 피합니다. 변동이 보이면 먼저 변경 기록표에서 같은 시기에 집계 기준이나 콘텐츠, 광고 설정이 바뀌었는지 확인합니다. 설명되는 변화는 기록으로 정리하고, 설명되지 않는 변화는 다음 점검일까지 지켜본 뒤 다시 판단합니다.
이렇게 하면 숫자가 움직일 때마다 새로운 가설을 세우는 소모를 줄이고, 근거가 쌓인 뒤에만 수정 작업으로 넘어갈 수 있습니다.
지표마다 담당자와 집계 방법을 정해 둡니다
기록이 오래 이어지려면 누가 어떻게 모으는지가 분명해야 합니다. 지표마다 담당자를 정하고, 수작업으로 분류하는 항목이라면 분류 기준을 짧은 문장으로 적어 둡니다. 예를 들어 같은 질문이 전화와 현장에서 들어올 때 하나의 유형으로 세기로 했다면, 그 기준을 변경 기록표 옆에 두고 담당자가 바뀌어도 같은 방식으로 세도록 합니다.
문의 내용을 기록할 때는 개인을 알 수 있는 정보를 남기지 않고 질문의 유형만 적습니다. 그래도 안내가 부족한 부분을 찾는 데에는 충분합니다. 수작업이 너무 복잡하면 한두 달 뒤에 중단되기 쉬우므로, 집계에 드는 시간이 현실적인지도 지표를 고르는 기준에 포함합니다.
담당자가 바뀌는 시점에는 변경 기록표를 먼저 읽도록 인수 절차에 넣어 두면 좋습니다. 숫자만 넘겨받으면 기준의 맥락이 사라지기 때문입니다.
월말 회의에서는 수정할 대상을 먼저 묻습니다
회의에서 숫자가 올랐는지 내렸는지만 확인하면 보고가 끝나고 실행이 남지 않습니다. 변경 기록표를 펼쳐 놓고, 이번 달에 어떤 지표가 어떤 문장이나 경로와 연결되어 있었는지를 먼저 살펴봅니다. 그다음 다음 달에 고칠 문장, 링크, 안내 경로를 한두 가지로 좁힙니다.
고친 뒤에도 같은 문의가 이어진다면 답이 길거나 눈에 띄지 않는 위치에 있을 가능성을 살펴볼 수 있습니다. 반대로 조회가 줄었더라도 안내가 분명해져 따로 확인할 필요가 줄어든 결과일 수 있으므로, 조회 수 하나만으로 방향을 정하지 않습니다.
회의가 끝나면 결정한 수정 사항과 다음 점검일을 변경 기록표에 바로 적습니다. 이 한 줄이 쌓이면 몇 달 뒤 지표의 흐름을 설명하는 가장 믿을 만한 자료가 됩니다.
실무에서 확인할 점
변경 기록표는 보고서를 풍성하게 만들기 위한 문서가 아니라, 팀이 같은 방법으로 다시 기록하고 근거를 설명하기 위한 도구입니다. 지표를 바꿀 때 날짜와 이유, 새 기준의 첫 집계월, 비교에 쓸 기간이 적혀 있는지 확인하는 것만으로도 해석의 오류가 크게 줄어듭니다. 사이트와 팀의 조건에 따라 알맞은 지표와 기록 주기는 다를 수 있으므로, 처음에는 적은 항목으로 시작해 실제로 이어 갈 수 있는지부터 점검하시기 바랍니다.