AI SEO 전문가가 직접 진행한 실험을 통해 ChatGPT의 웹 검색 기능이 실제로는 Google과 Bing에 의존하고 있다는 사실이 밝혀졌습니다. 많은 사람들이 오해하고 있는 AI 검색의 작동 방식과 이것이 마케팅 전략에 미치는 영향을 살펴보겠습니다.
ChatGPT가 웹 검색 기능을 출시하면서 많은 사람들이 “이제 AI가 독립적으로 웹사이트를 찾아서 인용할 수 있을 것”이라고 생각했습니다. 하지만 실제로는 어떨까요? AI SEO 전문가 메테한(Metehan)이 진행한 흥미로운 실험 결과를 통해 그 진실을 알아보겠습니다.
실험 설계: Google 없이 ChatGPT가 사이트를 찾을 수 있을까?
메테한은 ChatGPT가 기존 검색 엔진에 의존하지 않고 독립적으로 웹사이트를 발견할 수 있는지 확인하기 위해 다음과 같은 실험을 설계했습니다:
실험 조건
- 새로운 도메인 구매
- Google Search Console 등록 없음
- Google Analytics 설치 없음
- Cloudflare Workers & Pages와 Astro 프레임워크 사용
- AI로 생성한 6개의 의미 없는 블로그 포스트 발행
- 오직 IndexNow만 사용하여 검색 엔진에 알림
실험의 핵심 질문은 간단했습니다. “OpenAI의 웹 검색 모듈에 직접 핑을 보내면 Google Search Console에 URL을 제출하는 것처럼 작동할까?”
예상과 달랐던 실험 결과
첫 3일간의 결과: 완전한 실패
7월 8일에 콘텐츠를 추가한 후, 메테한은 OpenAI의 웹 검색 기능에 직접 요청을 보냈습니다. 결과는 놀라웠습니다. 무려 3일 동안 인덱싱된 페이지가 전혀 없었습니다. ChatGPT는 새 웹사이트를 전혀 찾지 못했습니다.
10일 후의 반전
7월 18일, 실험자는 다시 확인해봤습니다. 여전히 Google Search Console에 등록하지 않았고, Google Analytics도 설치하지 않았습니다. 그런데 놀랍게도 웹사이트가 Google과 Bing에 인덱싱되어 있었습니다.
최종 결과 분석
- Google: 3개 페이지 인덱싱
- Bing: 1개 페이지 인덱싱 (때로는 HTTP와 HTTPS 홈페이지로 2개)
- ChatGPT: 3개 페이지 표시 (메타 설명이 Google과 동일)
이 결과가 보여주는 것은 명확합니다. ChatGPT는 독립적인 웹 크롤링 능력이 없으며, Google과 Bing이 먼저 인덱싱한 후에야 해당 페이지들을 인용할 수 있었습니다.
AI 크롤러의 현실: 여전히 전통적 검색엔진에 의존
이 실험 결과는 Cloudflare의 최근 보고서와도 일치합니다. 2024년부터 2025년까지 AI 크롤러 활동을 분석한 결과에 따르면:
주요 AI 크롤러 현황
- GPTBot (OpenAI): 5%에서 30%로 급성장
- Meta-ExternalAgent (Meta): 새롭게 19% 점유율 기록
- ClaudeBot (Anthropic): 27%에서 21%로 감소
- Bytespider (ByteDance): 42%에서 7%로 급감
그러나 가장 중요한 발견은 Googlebot의 압도적 성장입니다. Google의 크롤러는 2024년 5월 대비 2025년 5월에 96% 증가했으며, 전체 크롤링 트래픽의 50%를 차지하게 되었습니다.
AI 시대에도 SEO가 여전히 중요한 이유
이번 실험이 마케터와 사업자들에게 주는 교훈은 명확합니다:
1. AI 검색도 결국 전통적 검색엔진에 의존
ChatGPT의 웹 검색 기능은 혁신적으로 보이지만, 실제로는 Google과 Bing이 수집한 정보를 기반으로 합니다. 즉, AI 시대가 왔다고 해서 기존 SEO 전략을 포기할 수는 없습니다.
2. Google 최적화의 중요성 증대
Googlebot의 활동이 96% 증가했다는 것은 Google이 AI 오버뷰와 같은 새로운 기능을 위해 더 많은 데이터를 수집하고 있다는 의미입니다. 이는 Google 검색 최적화가 여전히 가장 중요한 디지털 마케팅 전략임을 보여줍니다.
3. 새로운 기회와 도전
AI 검색이 대중화되면서 콘텐츠가 AI 도구에 인용되는 것이 새로운 트래픽 소스가 될 수 있습니다. 하지만 이를 위해서는 여전히 전통적인 검색엔진에서 먼저 발견되어야 합니다.
실무진이 알아야 할 핵심 전략
즉시 실행해야 할 액션
- Google Search Console 등록 필수: 아무리 혁신적인 AI 도구라도 Google이 먼저 찾지 못하면 소용없습니다.
- robots.txt 파일 관리: AI 크롤러들이 여러분의 콘텐츠에 접근할 수 있도록 적절히 설정하세요. GPTBot, ClaudeBot 등을 허용할지 결정해야 합니다.
- 콘텐츠 품질 중시: AI가 인용하고 싶어하는 고품질 콘텐츠를 만드는 것이 그 어느 때보다 중요합니다.
장기적 관점
AI 검색이 발전하면서 검색 환경은 계속 변화할 것입니다. 하지만 이번 실험이 보여주듯, 근본적인 원칙은 여전히 유효합니다. 좋은 콘텐츠를 만들고, 검색엔진이 쉽게 찾을 수 있게 하며, 사용자에게 가치를 제공하는 것이 가장 중요합니다.
AI가 검색의 미래를 바꾸고 있지만, 그 미래는 여전히 전통적인 검색엔진의 인프라 위에 구축되고 있습니다. 따라서 AI 시대의 마케팅 전략은 기존 SEO 전략을 대체하는 것이 아니라, 이를 확장하고 발전시키는 방향으로 나아가야 할 것입니다.
참고자료:
Comments