기준선 그리기
도입 전 8주의 표본을 기준선으로 잡습니다. 이 기준선이 없는 리포트는 보내지 않습니다.
표본에 포함된 산업군 (정상화 기준)
콘텐츠 SEO 의 90% 는 측정의 문제, 10% 가 글의 문제입니다. 우리는 한 분기에 가설 하나를 세우고 결과가 뜻대로 안 나오면 분위수 차트를 다시 그립니다. 작년에 159건의 작업을 돌렸고 그중 41% 가 의도와 다른 결과를 줬습니다 — 그 41% 가 가장 큰 학습이었습니다.
이번 분기 표본, 정상화 기준
주제 클러스터 59개에 걸친 표본입니다. 이 표본 안에서 분위수와 리프트를 계산합니다.
허브-가지 구조로 묶인 클러스터. 클러스터 간 트래픽 분배 회귀를 분기마다 재측정합니다.
기준선 대비 월 중앙값 리프트. 측정 오차 ±1.2pp 를 보정한 정상화 수치입니다.
"처음엔 그래프가 너무 많다고 느꼈는데, 한 분기 지나니 그게 가장 정직한 보고서더라고요. 평균만 보던 우리 팀이 분위수로 의사결정하기 시작했습니다."
도입 전 8주의 표본을 기준선으로 잡습니다. 이 기준선이 없는 리포트는 보내지 않습니다.
한 분기에 가설 하나를 한 줄로 적습니다. 검정력이 충분한 표본 크기를 같이 명시합니다.
주간 보고서에 25·50·75분위가 함께 들어갑니다. 의도와 다른 결과도 같은 분량으로 적습니다.