매주 무엇을 하는가 (2026) — AEO 운영 4단계와 측정 5원칙
"AEO는 어떻게 하나요"라는 질문에는 네 단계로 답합니다. 질문을 뽑고, 답이 되는 문서를 발행하고, 인용 여부를 재고, 인용된 출처를 역추적해 문서를 고칩니다. 이 넷을 매주 한 바퀴 돕니다.
1분 요약
- AI 답변은 같은 질문에도 매번 달라집니다. 같은 날 같은 문장을 반복해 물었더니 등장한 회차와 등장하지 않은 회차가 한 자리에 섞여 나왔습니다.
- 그래서 한 번 물어본 결과는 진단이 되지 못합니다. 좋게 나온 화면 한 장은 그 순간 그렇게 나왔다는 사실만 증명합니다.
- 엔진마다 답이 다릅니다. 같은 문장에서 한 AI는 회사를 언급했고 다른 두 AI는 반복 내내 한 번도 언급하지 않았습니다.
- 운영은 네 단계입니다. 질문 설계, 답변형 문서 발행, 주간 측정, 인용 출처 역추적.
- 믿을 수 있는 측정에는 다섯 가지 조건이 필요합니다. 반복해도 편차는 사라지지 않고 그 한계도 아래에 적었습니다.
"직원이 물어보니 나오던데요"
상담에서 자주 나오는 대화입니다.
"담당자가 ChatGPT에 쳐봤는데 우리 회사 나온다고 하더라고요. 캡처도 보내줬습니다."
"업체에서도 성공 사례라고 화면 캡처를 몇 장 보내줬어요. 그러면 되는 거 아닙니까?"
그 캡처는 거짓이 아닙니다. 다만 증명하는 범위가 좁습니다. 그 시각, 그 계정, 그 한 번의 질문에서 그렇게 나왔다는 사실까지죠. 같은 질문을 30분 뒤에 다시 물으면 답이 바뀌어 있는 경우가 흔합니다.
같은 질문을 다시 물으면 왜 답이 달라집니까
AI는 저장된 순위표에서 답을 꺼내오지 않습니다. 질문을 받을 때마다 답을 새로 씁니다.
그래서 "우리가 3위입니다" 같은 표현은 AI 답변에서 성립하기 어렵습니다. 성립하는 표현은 하나뿐입니다. 여러 번 물었을 때 몇 번 등장했는가.
저희가 진단한 한 고객사에서 발견형 질문 하나를 놓고 본 결과입니다. 한 엔진에서는 세 번 중 두 번 등장했습니다. 나온 회차와 나오지 않은 회차가 같은 날 같은 조건에서 섞여 나왔습니다. 나머지 두 엔진에서는 각각 다섯 번을 물어 한 번도 등장하지 않았고요.
여기서 캡처의 위험이 그대로 드러납니다. 등장한 회차를 캡처하면 "AI가 우리를 추천합니다"가 됩니다. 등장하지 않은 회차를 캡처하면 "AI 답변에서 사라졌습니다"가 됩니다. 같은 날 같은 문장에서 정반대의 두 자료가 모두 만들어집니다. 어느 쪽도 거짓말을 하지 않았는데 결론이 반대죠.
한 번의 결과는 관측이지 측정이 아닙니다. 측정은 여러 번의 관측을 같은 조건에서 모아 빈도로 바꾸는 일입니다.
한 사이클은 네 단계입니다
① 질문 설계. 고객이 AI에게 실제로 던지는 문장을 뽑습니다. 업종 키워드가 아니라 "OO 하려는데 어디가 낫나요" 같은 문장 단위입니다. 여기서 잘못 뽑으면 뒤 세 단계가 헛돕니다.
② 답변형 문서 제작과 발행. 질문 하나에 문서 하나가 원칙입니다. 답을 앞에 두고 출처와 구조화 데이터를 붙여 소유권과 운영권이 있는 채널에만 올립니다.
③ 측정. Citation Radar™로 ChatGPT, Claude, Gemini, Perplexity, Grok 가운데 계약 조건에 따라 1종에서 5종을 골라 같은 질문을 매주 넣어 인용 여부를 기록합니다.
④ 역추적. 우리가 빠진 답변이 어떤 문서를 근거로 삼았는지 Source Trace™로 되짚습니다. 이긴 문서를 확인하고 우리 문서를 교체하거나 보강합니다.
측정의 다섯 가지 조건
3단계가 흔들리면 나머지 셋이 전부 헛돕니다. 그래서 조건을 고정합니다.
① 로그인 기억 배제. 평소 쓰던 계정은 이전 대화를 기억해 우리 회사를 더 잘 답합니다. 임시 채팅이나 비로그인 상태로 잽니다. 새 고객이 보는 화면을 기준으로 삼기 위해서입니다.
② 반복 질의. 질문 하나당 최소 3회. 등장 여부가 아니라 등장 빈도를 셉니다.
③ 복수 엔진. 같은 문장에서 엔진마다 답이 갈립니다. 한 엔진 결과로 판정하면 그 엔진의 성향을 우리 성적으로 착각하게 됩니다.
④ 브랜드형과 발견형 분리. 합산하지 않습니다. 이유는 AEO 성과를 대표님께 보고하는 지표 5개에 숫자로 적었습니다.
⑤ 조건 고정 후 재측정. 질문 세트와 측정 조건을 바꾸지 않고 다음 주에 다시 잽니다. 조건을 바꿔야 할 때는 바꾼 사실과 이유를 리포트에 남깁니다.
한 달은 이렇게 돕니다
1주차 질문 목록 갱신과 문서 기획, 2주차 발행, 3주차 측정과 역추적, 4주차 교체와 보강, 월간 리포트. 다음 달 질문 목록은 이번 달 역추적 결과에서 나옵니다.
캠페인이라면 여기서 끝납니다. AEO는 끝나지 않습니다. 엔진이 업데이트되고 경쟁 문서가 올라오면 인용되던 문서도 빠집니다. 저희가 AEO를 월 단위 운영으로만 받는 이유입니다.
반복해도 남는 한계
반복 측정으로 편차를 줄일 수는 있어도 없애지는 못합니다. 사용자의 지역, 기기, 이전 대화에 따라 답이 달라집니다.
저희가 드리는 숫자도 전수 집계가 아니라 표본입니다. 새 고객이 볼 가능성이 높은 화면의 표본이지 모든 고객이 본 화면의 집계가 아닙니다. 그리고 빈도가 올랐다고 그 원인이 우리가 손댄 것이라고 단정하기는 어렵습니다. 그래서 바꾸기 전과 후를 같은 조건으로 재고 안 오르면 다음 가설로 넘어갑니다.
이 한계를 먼저 말하지 않는 리포트는 숫자보다 태도를 먼저 보시는 편이 낫습니다.
함께 보시면 좋은 글
측정 조건 고지 — 본문의 고객사 실측치는 2026년 8월 13일 고객사 1곳을 대상으로 ChatGPT(임시 채팅), Claude(웹검색), Gemini(검색연동) 3개 엔진에서 질문 13종을 반복 질의해 얻은 결과입니다. 고객사 요청에 따라 실명은 밝히지 않습니다. 해당 고객사는 병원 업종이며 업종이 다르면 수치도 달라집니다. "3회 중 2회 / 5회 중 0회"는 같은 발견형 질문 하나를 서로 다른 엔진에서 반복 질의한 결과이며 엔진 간 성능 비교로 읽으실 수치가 아닙니다. AI 답변은 시점, 계정, 환경에 따라 달라집니다.
지금 AI가 귀사를 어떻게 말하는지 확인해 보세요
브랜드를 지정해 주시면 같은 형식의 진단 리포트를 3영업일 안에 드립니다.
무료 진단 신청 →제출하신 정보는 진단 리포트 작성·발송과 상담 목적으로만 사용하며 1년 보관 후 파기합니다. 개인정보 처리방침