가이드 02

측정 결과 읽는 법

보고서의 숫자보다 조건을 먼저 보세요. 조건이 같아야 비교가 됩니다.

1. 01

   같은 조건에서 관측했나요?

   질문·엔진·언어 등 비교 조건을 맞추고 각 관측 시점과 조건 변경을 기록합니다. 질문 문구나 사용한 AI 서비스, 언어가 바뀌면 결과도 달라질 수 있으므로, 무엇을 고정하고 무엇이 바뀌었는지가 결과와 함께 적혀 있어야 합니다.

   전후 비교 자료를 받으셨다면 두 시점의 조건이 같은지부터 확인하세요.

2. 02

   미확인과 언급 없음을 나눴나요?

   미확인은 0이 아닙니다. 답을 못 받은 것과, 물었더니 브랜드가 없다고 답한 것은 서로 다른 결과입니다. 이 둘을 하나로 합쳐 보고하면 실제보다 나쁘거나 좋게 보일 수 있습니다.

   답을 받지 못해 확인하지 못한 경우(엔진 접속 오류, 로그인 벽 등)는 미확인으로, 정상적으로 답을 받았는데 브랜드가 나오지 않은 경우는 언급 없음으로 나눠서 기록하는지 확인하세요.

3. 03

   조건 변경과 개선을 구분했나요?

   질문 문구나 AI 서비스의 버전이 바뀌면, 실제로는 아무것도 개선하지 않았는데도 결과가 달라 보일 수 있습니다. 결과가 좋아졌다면 그 이유가 실제 개선인지, 조건이 바뀐 것인지부터 구분해서 보세요.

   조건을 바꿔야 했다면(예: 서비스 업데이트) 그 변경 사실과 시점을 결과와 함께 기록해 두는 것이 좋습니다.

4. 04

   다음 작업은 무엇인가요?

   결과를 확인한 뒤에는 다음에 손볼 페이지나 정보를 정하는 것이 목적입니다. 점수 하나로 전체 결과를 압축하기보다, 어떤 질문에서 무엇이 확인됐고 무엇이 아직 확인되지 않았는지를 보고 다음 우선순위를 정하시길 권합니다.

측정 조건을 어떻게 정하고 기록하는지 궁금하시면 상담에서 확인하실 수 있습니다.