생성형 AI의 답변을 점검하려면 먼저 질문 목록을 확정하고, 그 문장을 바꾸지 않은 채 같은 조건으로 반복해 입력해야 합니다. 담당자가 그때그때 떠오르는 질문을 넣어 보는 방식으로는 이번 달 결과가 좋아진 것인지, 질문이 쉬워진 것인지 구분할 수 없습니다. 질문 목록은 고객이 실제로 구매를 검토하며 던지는 질문에서 출발해야 측정 결과가 영업에 쓸모 있는 정보가 됩니다.
어떤 질문을 목록에 넣어야 하나요?
출발점은 회사 이름이 아니라 고객의 구매 상황입니다. “어떤 업체가 이 부품을 만드나요”, “이 용도에 맞는 소재는 무엇인가요”, “소량 주문이 가능한 공급처는 어디인가요”처럼 고객이 아직 회사를 모르는 상태에서 던지는 질문이 핵심입니다. 이런 질문의 답에 회사가 등장해야 새로운 문의로 이어질 가능성이 생깁니다.
후보 질문은 영업 담당자가 받은 첫 문의, 전시회에서 받은 질문, 견적 요청서의 자유 입력 내용에서 모읍니다. 내부 회의에서 만든 질문보다 고객이 실제로 쓴 표현이 더 정확합니다. 후보를 모은 뒤에는 회사가 공식적으로 답할 수 있는 영역인지 확인하세요. 회사가 다루지 않는 제품이나 지역에 관한 질문은 목록에 넣어도 개선할 방법이 없습니다.
회사 이름을 넣은 질문도 일부 포함합니다. “회사명 제품의 특징은 무엇인가요” 같은 질문은 AI가 회사 정보를 정확하게 알고 있는지 확인하는 용도입니다. 다만 이런 질문만으로 목록을 채우면 이미 회사를 아는 사람의 시점만 측정하게 됩니다.
질문 유형은 어떻게 배분하나요?
목록은 구매 의도가 분명한 질문을 중심에 두고, 회사 정보를 확인하는 질문과 관련 주제로 넓히는 질문을 보조로 둡니다. 골드넥스의 측정 기준은 검증 질문 15개 가운데 구매의도 질문을 10개로 두고, 같은 질문을 AI 엔진 4종에 입력하는 방식입니다. 세부 측정 일정은 검색·AI 노출 성과 측정에 정리해 두었습니다.
질문 수를 정할 때는 매번 끝까지 기록할 수 있는 양인지 따져 보세요. 질문이 너무 많으면 측정할 때마다 일부를 건너뛰게 되고, 건너뛴 질문은 비교가 불가능해집니다. 처음에는 적은 수로 시작해 양식이 안정된 뒤 늘리는 편이 낫습니다.
제품군이 여럿인 회사라면 제품군마다 질문이 고르게 들어갔는지 확인합니다. 매출 비중이 큰 제품군만 질문에 넣으면 다른 제품군의 노출 문제는 측정에서 보이지 않습니다.
질문 문장은 왜 고정해야 하나요?
생성형 AI는 질문의 단어 하나만 달라져도 다른 답을 내놓을 수 있습니다. “추천해 주세요”와 “비교해 주세요”는 답의 구성이 다르고, 지역이나 용도를 붙였는지에 따라 등장하는 회사가 달라집니다. 그래서 목록에는 질문의 뜻이 아니라 입력할 문장을 그대로 적고, 측정할 때는 그 문장을 복사해 붙여 넣습니다.
문장을 고칠 필요가 생기면 기존 질문을 수정하지 말고 새 질문으로 추가하세요. 기존 질문은 종료일을 적어 보관하고, 새 질문은 시작일부터 기록을 쌓습니다. 질문마다 고유 번호를 붙여 두면 종료된 질문과 새 질문이 기록 안에서 섞이지 않습니다. 이렇게 해야 바뀐 문장 때문에 결과가 달라진 것을 성과로 오해하지 않습니다.
질문 목록 문서에는 질문 문장 옆에 그 질문을 넣은 이유와 연결된 제품군도 적어 둡니다. 입력 조건도 함께 적어 둡니다. 로그인 여부, 이전 대화 기록을 지운 새 대화에서 입력했는지, 사용한 언어, 측정한 날짜가 결과에 영향을 줄 수 있습니다. 엔진의 버전이나 화면이 바뀐 것을 확인했다면 그 사실도 기록에 남기세요.
결과는 어떤 양식으로 기록하나요?
질문마다 한 줄을 쓰고, 엔진별로 회사 언급 여부, 언급된 맥락, 인용된 주소, 함께 언급된 다른 출처를 적습니다. 회사가 언급됐더라도 사실과 다른 내용이 섞여 있다면 별도 표시를 해 두세요. 잘못된 정보가 어느 페이지에서 비롯됐는지 찾는 단서가 됩니다.
답변 화면은 이미지나 텍스트로 저장해 두고 기록과 같은 폴더에 보관합니다. 생성형 AI의 답은 나중에 같은 질문을 넣어도 다시 나오지 않을 수 있어서, 당시 화면이 유일한 근거가 됩니다. 저장 파일 이름에는 질문 번호, 엔진, 날짜를 넣어 찾기 쉽게 하세요. 기록 양식의 칸은 처음 정한 뒤에는 되도록 바꾸지 않습니다. 칸이 바뀌면 이전 기록과 나란히 놓고 비교하기 어려워지기 때문입니다.
다른 회사나 기관이 답에 등장하면 어떻게 기록하나요?
회사가 언급되지 않은 답변도 중요한 자료입니다. 그 자리에 어떤 유형의 출처가 등장했는지 적어 두세요. 공공기관 자료, 업계 단체의 안내문, 다른 제조사의 기술 문서, 비교 사이트처럼 출처의 성격을 분류해 두면 질문마다 어떤 근거가 답을 차지하고 있는지 보입니다.
출처의 성격에 따라 대응이 달라집니다. 공식 기관의 기준 문서가 답을 차지하는 질문이라면 회사 페이지가 그 자리를 대신하기는 어렵고, 오히려 그 기준을 정확히 인용하며 회사 제품이 어떤 조건에 해당하는지 설명하는 페이지를 만드는 편이 현실적입니다. 다른 회사의 상세한 기술 문서가 인용되고 있다면 우리 사이트에 같은 수준의 정보가 있는지, 있다면 찾기 쉬운 구조인지 점검합니다.
기록에는 다른 회사의 이름을 평가하는 문장을 쓰지 말고 관찰한 사실만 남깁니다. 어떤 주소가 인용됐고 답의 어느 부분을 뒷받침했는지 적으면 충분합니다. 이 기록은 내부 점검용 자료이며, 외부 콘텐츠에서 다른 회사를 비교 대상으로 언급하는 근거로 쓰지 않습니다.
한 번의 결과로 판단해도 되나요?
한 번의 결과로 결론을 내리지 마세요. 같은 질문에도 시점에 따라 답이 달라질 수 있으므로, 처음 기록한 결과를 기준선으로 두고 정해진 주기마다 같은 조건으로 반복해 변화의 방향을 봅니다. 특정 엔진에서만 결과가 크게 달라졌다면 엔진 쪽 변화인지, 사이트 쪽 변화인지 구분해 원인을 기록합니다.
결과가 나빠졌을 때도 바로 문장을 바꾸지 않습니다. 해당 질문에 답하는 페이지가 색인돼 있는지, 페이지가 질문에 직접 답하는지, 더 강한 공식 출처가 이미 답을 차지하고 있는지 순서대로 확인한 뒤 조치하세요.
목록은 누가 관리해야 하나요?
목록에는 관리 담당자를 한 명 지정하고, 질문 추가와 종료는 담당자를 거쳐 처리합니다. 영업, 제품, 마케팅 담당자가 각자 질문을 바꾸기 시작하면 목록은 금방 흐트러집니다. 분기마다 영업 담당자와 함께 목록을 검토해, 실제 고객 질문과 멀어진 항목이 없는지 확인하는 정도의 절차면 충분합니다. 신제품 출시나 주력 시장 변경처럼 구매 상황이 바뀌는 사건이 생기면 정기 검토를 기다리지 말고 질문 추가 여부를 바로 논의하세요. 검토 결과와 결정 이유는 목록 문서의 변경 기록에 함께 남겨, 다음 담당자가 왜 그 질문이 들어가고 빠졌는지 알 수 있게 합니다.
우리 회사가 주요 구매 질문에서 현재 어떻게 답변되고 있는지 확인하고 싶다면 사이트 주소를 준비해 무상 사전 진단 신청을 진행하세요. 진단 항목에 주요 구매 질문에 대한 AI 인용 현황이 포함됩니다.
출처
업무 과정을 설명하기 위한 참고 사진입니다.
사진: DariuszSankowski / Pixabay · 이용 조건
사진: Pexels / Pixabay · 이용 조건