AI 검색 성과 보고서를 받으면 수치의 크기보다 그 수치가 어떤 조건에서 측정됐는지를 먼저 확인해야 합니다. 같은 질문 895개를 한 달 간격으로 측정한 관측에서 ChatGPT 답변 1건당 인용은 14.0개에서 2.8개로 줄었습니다. 같은 기간 답변당 브랜드 언급은 3.4개에서 3.5개로 거의 변하지 않았습니다. 언급과 인용, AI 서비스, 측정 시점을 나누지 않은 보고서는 같은 현상을 정반대로 해석하게 만들 수 있습니다.
근거 사례: 한 달 사이 달라진 AI 답변 지표
아래 수치와 점검 기준 6가지는 넥스트티가 공개한 관측 자료에서 가져왔습니다. 넥스트티는 GEO 대행 서비스와 측정 도구 OptiGEO를 제공하는 회사입니다. 자료를 읽을 때 이 이해관계를 함께 고려해야 합니다.
측정 범위는 세 가지입니다. 첫째, 로그인하지 않은 ChatGPT·Gemini에 같은 질문 895개를 2026년 8월과 9월에 입력한 결과입니다. 둘째, 브랜드 30곳을 2026년 6~9월에 측정한 결과입니다. 셋째, 넥스트티 자사 질문 1개를 2026년 3~9월에 측정한 결과입니다.
| 지표 | 측정 범위 | 값 |
|---|---|---|
| ChatGPT 답변 1건당 인용 | 같은 질문 895개, 2026년 8월→9월 | 14.0→2.8개(약 80% 감소) |
| ChatGPT 인용(중복 주소 제외) | 같은 질문 895개, 2026년 8월→9월 | 13.6→3.5개 |
| 답변당 브랜드 언급 | 같은 질문 895개, 2026년 8월→9월 | 3.4→3.5개 |
| Gemini 답변 1건당 인용 | 같은 질문 895개, 2026년 8월→9월 | 4.9→6.4개 |
| 회사 이름 없는 질문의 언급률 | 답변 25,251건 | 6.1% |
| 회사 이름을 넣은 질문의 언급률 | 6곳·368건(참고치) | 85.9% |
ChatGPT의 인용은 크게 줄었고 Gemini의 인용은 늘었습니다. 다만 9월에는 출처 집계 보정이 있었습니다. AI 서비스 쪽 답변 방식의 변화 같은 다른 가능성도 남아 있습니다. 이번 측정만으로는 인용 감소의 원인을 콘텐츠 등 특정 요인으로 단정하기 어렵습니다.
| AI 서비스 | 공식 사이트 인용 비율(답변 1,228건) |
|---|---|
| Perplexity | 56.6% |
| 구글 AI 모드 | 50.0% |
| Gemini | 38.6% |
| Claude | 38.4% |
| ChatGPT | 28.8% |
공식 사이트 인용 비율은 서비스마다 차이가 컸습니다. Gemini의 비율은 답변에 중계 주소가 쓰이는 탓에 실제보다 낮게 집계됐을 가능성이 있습니다. 서비스 사이의 비교에 그대로 쓰기 전에 이 한계를 함께 적어야 합니다.
점검 1·2: 측정 주체와 AI 서비스별 분리
1. 업체가 직접 측정했는가
보고서의 수치를 누가, 어떤 방식으로 수집했는지 확인합니다. AI 검색 답변은 같은 질문에도 매번 달라질 수 있습니다. 그래서 화면 몇 장을 캡처한 결과만으로는 재현이 어렵습니다. 질문 목록, 측정 횟수, 기록 보관 방식을 업체가 직접 관리하는지가 첫 번째 확인 대상입니다.
2. AI 서비스별로 나누어 보고하는가
앞의 사례에서 같은 기간 ChatGPT 인용은 줄고 Gemini 인용은 늘었습니다. 두 서비스를 합친 평균만 보고하면 한쪽의 급감이 다른 쪽의 증가에 가려집니다. 공식 사이트 인용 비율도 Perplexity 56.6%, ChatGPT 28.8%처럼 서비스마다 다르게 나타났습니다. 보고서에 서비스별 표가 따로 있는지 확인합니다.
점검 3·4: 언급과 인용, 측정 조건의 구분
3. 언급과 인용을 다른 지표로 다루는가
언급은 답변 문장에 브랜드 이름이 나오는 것입니다. 인용은 답변이 웹페이지 주소를 출처로 제시하는 것입니다. 사례에서 인용은 약 80% 줄었지만 언급은 3.4개에서 3.5개로 유지됐습니다. 두 지표를 하나로 묶으면 인용이 줄어든 달을 성과 하락으로 오해할 수 있습니다. 반대로 유지된 언급을 인용 성과로 잘못 읽을 수도 있습니다.
4. 측정 조건을 공개하는가
로그인 여부, 질문 수, 측정 기간, 질문에 회사 이름이 들어갔는지를 확인합니다. 특히 회사 이름 포함 여부는 결과를 크게 바꿉니다. 회사 이름이 없는 질문의 언급률은 6.1%(답변 25,251건)였습니다. 회사 이름을 넣은 질문은 85.9%였습니다. 후자는 6곳·368건의 참고치입니다. 그래도 질문 구성을 밝히지 않은 높은 언급률은 그대로 받아들이기 어렵다는 점을 보여 줍니다.
점검 5·6: 전후 비교와 대안 원인 검토
5. 같은 조건으로 전후를 비교하는가
작업 전후 수치를 비교하려면 질문 목록, 로그인 상태, AI 서비스, 집계 기준이 같아야 합니다. 사례처럼 한 달 사이에도 인용 수는 크게 움직일 수 있습니다. 조건이 달라진 상태로 비교하면 변화가 어디서 왔는지 구분할 수 없습니다. 집계 기준을 바꿨다면 그 시점과 내용이 보고서에 적혀 있는지 봅니다.
6. 작업 외의 원인을 검토했는가
수치가 좋아졌을 때 그 원인을 작업 효과로만 설명하는 보고서는 주의해서 읽습니다. 같은 관측 자료에서 넥스트티 자사 질문 1개에 대한 9월 언급률은 81.6%(49회 중 40회)였습니다. 넥스트티는 이 값을 참고치로 표시했고, 작업 효과로 단정하지 않았습니다. AI 서비스의 변화, 집계 보정, 표본 크기를 함께 검토했는지 확인합니다.
보고서를 받았을 때 확인할 목록
- 업체가 수치를 직접 측정했고, 질문 목록과 측정 횟수를 제시하는가
- ChatGPT·Gemini 등 AI 서비스별로 결과를 나누어 보고하는가
- 브랜드 언급과 페이지 인용을 별도 지표로 표시하는가
- 로그인 여부, 질문 수, 측정 기간, 회사 이름 포함 여부를 밝히는가
- 인용 수에 중복 주소가 포함됐는지 표시하는가
- 작업 전후를 같은 질문, 같은 조건으로 비교하는가
- 집계 기준 변경이나 보정이 있었다면 그 시점을 적었는가
- AI 서비스 변화 등 작업 외 원인을 검토한 내용이 있는가
- 표본이 작은 수치에 참고치 표시가 있는가
이 가운데 답할 수 없는 항목이 있으면 수치를 성과 판단에 쓰기 전에 업체에 추가 자료를 요청하는 편이 안전합니다.
정리
AI 검색 지표는 같은 달에도 서비스별로 반대 방향으로 움직일 수 있습니다. 언급과 인용도 서로 다르게 움직입니다. 앞의 관측에서 ChatGPT 인용은 크게 줄었지만 브랜드 언급은 유지됐습니다. 이번 측정만으로는 그 원인을 특정하기 어렵습니다. 따라서 보고서의 숫자 하나로 성과를 판단하기보다 측정 조건과 지표 구분을 함께 읽어야 합니다. 다음 보고서를 받으면 앞의 6가지 기준을 하나씩 대조합니다. 기준마다 보고서에 근거가 있는지 확인합니다.