Follow the Metrics for PM · 웹 교재 v1.0 · 2026-09-21
계산형 문항은 단위·분모·기간을 함께 확인한다. 설계형 문항의 아래 답안은 가능한 작성 예이며 유일한 운영 정답이 아니다.
1. 주장의 구분
언급률은 정한 응답 표본의 기술 통계다. 도구가 언급률을 높인다는 것은 비교를 요구하는 인과 주장이고, 언급 증가가 구매를 높인다는 연결도 별도 가설이다. 도입 권고에는 추가 효과·비용·대안·운영 범위가 필요하다. 관찰 통계 하나로 이 연결을 모두 통과시키지 않는다.
2. GEO의 분모
브랜드 언급률은 30/100=30%, 목표 도메인 인용 응답률은 20/100=20%, 인용 단위 점유율은 40/250=16%다. 응답 한 개에 목표 URL이 여러 개 있어 서로 다른 비율이 나온다. 선정한 질문·설정에 대한 값이며 실제 소비자나 시장 전체를 대표하는 표본이 아니다.
3. 반복과 독립성
같은 질문을 반복한 출력은 질문 구성이 같고 공통 모델·설정의 영향을 받는다. 실행 100회는 인간 100명의 독립 관찰이 아니다. 질문 단위의 변동과 반복 실행의 변동을 나누고, 질문 선정의 대표성과 엔진·시점 변화도 기록한다. 반복을 늘리면 특정 설정의 변동은 더 잘 볼 수 있어도 표본 질문의 편향이 자동으로 줄지는 않는다.
4. 구매와 연결
실제 유입 경로, 과업 완료·구매 기록과 귀속 가능 범위를 별도로 확인한다. 선정 질문의 실험 응답과 일반 웹 구매 로그를 같은 퍼널로 곱하지 않는다. 콘텐츠 변경의 효과를 비교하려면 질문·페이지 집합과 기간, 엔진 변경·간섭의 가정을 정한다. 인용 내용이 정확한지도 함께 검토한다.
5. 독립 평가 자료
입력한 인터뷰나 설문 답을 그대로 정답으로 쓰면 정보 누출과 암기 효과가 평가에 섞인다. 입력·학습/조정 자료와 검증할 사람·문항·미래 기간을 목적에 맞게 분리한다. 문구 이해의 일치가 장기 유지의 검증을 대신하지 않는다. 목표 과업에서 단순 기준선과 집단별 오류를 비교한다.
6. AI 비용 계산
호출 단가는 A 100원, B 70원이다. 호출 수를 곱한 모델 비용은 10,000원과 14,000원이고 기타 제공비를 더하면 20,000원과 32,000원이다. 접수당 비용은 200원·320원, 성공당 비용은 약 286원·356원이다. 추가 비용 12,000원/추가 성공 20건=600원이다. 더 많은 성공의 가치와 손상·대기까지 검토해야 채택 여부를 판단할 수 있다.
7. CAC와 제공 비용
CAC는 정의한 획득 활동의 비용을 신규 고객 수로 나눈다. 이후 반복 제공비까지 모두 넣으면 획득 효율과 이용량·제공 효율이 섞인다. 무료 체험 등 경계 항목은 관리 목적의 규칙을 적고, 같은 비용을 CAC와 미래 공헌에서 두 번 차감하지 않는지 확인한다. 기술 비용의 발생과 회계·관리상 분류는 별개다.
8. 새 주장 검토서 평가
문제, 기능, 주장 유형, 원전·버전, 측정 분모, 검증 자료, 추가 가치, 비용, 채택/시험/보류/거절의 이유를 포함한다. “유행이라서 채택”과 “기존 원리라서 거절” 모두 충분한 답이 아니다. 해당 제품에서 확인한 효용과 한계를 연결하고 어떤 증거가 들어오면 결론을 바꿀지 적는다.
자기 검토
수치와 문장의 대상이 같은지 확인한다. 관찰·가정·처방을 구분하고, 아직 없는 자료를 실제 관찰처럼 채우지 않는다. 계산 결과만 맞은 답안은 해석과 판단 조건을 보완한다.