대시보드를 볼 때 습관처럼 붙이는 한 문장이 있습니다: "1원칙으로 분석해." 이번 주에만 두 번, 내가 스스로 속고 있던 걸 걷어냈습니다.
대시보드는 숫자가 아니라 서사를 판다
대시보드는 라벨로 기분을 판다. "순위개선", "CTR개선", "게이트 발화 ●" — 전부 "곧 나아진다"는 안심 신호다. 라벨을 믿으면 값싼 수정만 계속 만지작거리게 된다.
이 프롬프트가 강제하는 네 가지 질문
- 진짜 의미 있는 숫자 하나가 뭐냐? (나머지는 허영·파생)
- 이 라벨이 "값싼 수정이 있는 척" 하나?
- 이 이벤트가 실제로 뭘 하나, 아니면 알림만인가?
- 이 점수가 신호냐 노이즈냐?
사례 1 — 트래픽 대시보드
48개 사이트, 노출 2,735. 기분 좋은 숫자다. 1원칙을 걸자: 진짜 숫자는 클릭 8. 라벨 다섯 중 넷은 헛된 희망이었고, 유일한 레버는 도메인 권위였다. 자세한 부검은 포트폴리오 트래픽 부검에.
사례 2 — 자기개선 게이트
자동화 함대 대시보드가 "게이트 발화 ●"를 띄웠다. 기분 좋은 신호다. 질문 두 개가 갈랐다.
- (3) 발화가 실제로 뭘 하나? 코드를 따라가 보니 관측용 알림만이 아니라, 성과 데이터로 다음 콘텐츠 순서를 실제로 바꾸는 실배선이었다. 여기까진 진짜였다.
- (4) 그 점수가 신호냐 노이즈냐? 발화 조건이 "데이터가 존재하나"뿐이라, 두 자릿수 조회수로 순서를 재정렬하고 있었다. 노이즈 과적합. 최소표본 문턱 하나를 걸어 고쳤다.
두 질문이 없었으면 "게이트 켜졌네, 좋아"로 넘어갔을 거다.
왜 먹히나 — 영리해서가 아니라 강제라서
이건 영리한 프롬프트가 아니다. 강제 함수(forcing function)다. 도메인 지식이 있어도 대시보드 서사에 젖으면 "CTR 올려야지", "게이트 켜졌네"로 흘러간다. 네 개의 질문이 그 흐름을 끊고 매번 "진짜 병목 하나"로 되돌린다. 비용 0, 반복 가능 — 재사용 프롬프트를 도구로 쓰는 습관의 가장 값싼 버전이다.
솔직한 부분: 놀라운 건 프롬프트의 영리함이 아니라, 내가 그 질문들을 스스로는 잘 안 한다는 사실이었다. 한 문장이 그걸 매번 대신 걸어준다.