🤖 AI가 내 홈페이지를 읽는다면? 초보자도 알아야 할 콘텐츠 최적화 이야기

 

요즘 내 홈페이지 방문자, 절반은 사람이 아닐 수 있어요

블로그 열심히 쓰고 있는데 왜 챗GPT는 내 글을 소개 안 해줄까요?

생각해보신 적 있나요? 검색에서는 꾸준히 나오는 것 같은데, AI한테 물어보면 내 글은 전혀 언급이 안 되는 상황이요.

2026년 현재, AI 에이전트는 하루에도 수백만 번씩 웹사이트를 돌아다니고 있어요. 우리가 챗GPT나 클로드한테 "요즘 유망한 직업이 뭐야?", "이 제품 어때?" 같은 걸 물어볼 때, 그 AI가 직접 웹사이트를 탐색해서 정보를 가져오거든요. 그게 바로 AI 에이전트의 활동이에요.

문제는 이 AI 에이전트가 사람과 완전히 다른 방식으로 콘텐츠를 읽는다는 점이에요. 아무리 잘 쓴 글이라도, AI가 제대로 못 읽으면 그냥 넘어가버려요. 오늘은 이 차이를 이해하고, 어떻게 하면 AI도 내 글을 잘 읽게 만들 수 있는지 쉽게 풀어볼게요.

"LLMs.txt 파일 하나 올리면 된다"는 말, 반만 맞아요

한동안 소셜미디어에서 이런 이야기가 돌았어요. "LLMs.txt만 루트에 올려두면 AI가 알아서 읽는다."

LLMs.txt는 웹사이트 입구에 붙여두는 AI용 안내판 같은 파일이에요. "이 사이트엔 이런 정보가 있어요"라고 미리 알려주는 거죠. 개념 자체는 괜찮았는데, 실제 AI가 움직이는 방식이랑 맞지 않아서 효과가 기대만큼 크지 않았어요.

반대로 "AI는 충분히 똑똑하니까 따로 최적화할 필요 없다"는 주장도 있어요. 이것도 틀렸어요.

AI는 사람만큼 유연하게 웹 페이지를 읽지 않아요. 굉장히 명확한 한계가 있고, 그 한계를 이해하고 글을 써야 AI가 제대로 인용해줘요.

AI 에이전트가 글을 다르게 읽는 이유, 컨텍스트 창이 뭔가요?

사람은 웹 페이지를 스크롤하면서 흥미로운 부분에 멈추고, 필요한 내용만 골라 읽어요. 시간이 좀 걸려도 괜찮고, 여러 번 왔다 갔다 할 수도 있죠.

AI 에이전트는 달라요. 핵심 제약이 하나 있는데, 바로 컨텍스트 창이에요. 컨텍스트 창이란 AI가 한 번에 처리할 수 있는 정보의 최대 크기예요. 책상 위에 올려놓을 수 있는 종이 양이 정해진 것처럼, AI도 한 번에 기억하고 처리할 수 있는 글자 수에 한계가 있어요.

그래서 AI 에이전트는 보통 파일의 앞부분 몇 줄이나 몇 킬로바이트만 읽고 판단을 내려요. 뒷부분에 아무리 중요한 내용이 있어도, 거기까지 읽지 못할 수 있다는 뜻이에요.

한 줄 정리: AI에게 보여주고 싶은 내용은 반드시 글의 앞쪽에 있어야 해요.

또 흥미로운 점이 있어요. AI 에이전트는 정확한 위치를 알고 방문할 때와 스스로 탐색할 때 행동이 완전히 달라요. 목적지 주소를 알고 가는 것과, 지도 없이 돌아다니는 것의 차이처럼요. 정보의 위치를 명확하게 안내할수록, AI가 더 빠르고 정확하게 원하는 내용에 도달해요.

콘텐츠 협상, 이게 실질적인 해결책이에요

세계적인 개발자 모니터링 서비스 센트리(Sentry)의 엔지니어 데이비드 크레이머는 이 문제를 콘텐츠 협상으로 해결했어요.

콘텐츠 협상이란, 웹 서버가 방문자 유형에 따라 다른 형태의 콘텐츠를 제공하는 방식이에요. 같은 책을 어린이용 그림책과 전문가용 교재로 따로 만드는 것처럼요.

웹 브라우저가 페이지를 요청할 때 요청 헤더라는 부가 정보를 같이 보내요. AI 에이전트는 이 헤더에 Accept: text/markdown이라는 표시를 붙이는 경우가 많아요. 서버가 이걸 감지하면 "AI 에이전트가 왔구나" 하고 AI에 맞는 형식으로 응답하는 거예요.

이 신호를 잡아내는 게 최적화의 첫 번째 열쇠예요.

센트리는 실제로 어떻게 AI 대응을 했나요?

센트리가 AI 에이전트를 위해 적용한 최적화 방식은 크게 세 가지예요.

첫째, 마크다운으로 응답해요. 마크다운은 간단한 기호로 문서 형식을 표현하는 가벼운 텍스트 포맷이에요. 일반 HTML 웹 페이지에는 광고, 메뉴, 버튼, 스크립트 등 보이지 않는 코드가 가득 들어 있어요. AI가 이걸 모두 처리하면 비용도 크고 핵심 내용 찾기도 어렵죠. 마크다운으로 바꾸면 핵심 내용만 남아서 AI가 훨씬 정확하게 이해해요.

둘째, 인덱스 페이지를 사이트맵처럼 구성해요. AI용 인덱스 페이지는 "이 사이트엔 이런 정보들이 있고, 각각 여기서 찾을 수 있어요"라는 목차 형태예요. AI가 원하는 정보의 위치를 즉시 파악할 수 있게 하는 거죠.

셋째, 진입점을 명확하게 안내해요. AI가 메인 웹사이트에 접속하면, MCP 서버, CLI, API 등 기계가 실제로 사용할 수 있는 접근 방법을 바로 알려줘요. "당신이 AI라면 이걸 쓰세요"라는 안내판인 셈이에요.

SEO는 알겠는데, GEO는 뭔가요? 이제 진짜 중요해졌어요

SEO는 많이 들어보셨을 거예요. 네이버나 구글 같은 검색엔진이 내 페이지를 잘 찾고, 높은 순위에 노출되도록 최적화하는 작업이죠.

이제 GEO(Generative Engine Optimization, 생성형 엔진 최적화)라는 개념이 뜨고 있어요. GEO는 챗GPT, 구글 AI 오버뷰, 클로드 같은 AI가 내 콘텐츠를 잘 이해하고, 사람들의 질문에 답할 때 내 내용을 인용하고 추천하도록 최적화하는 전략이에요.

이미 숫자로 보면 체감이 달라요. 검색을 해도 웹사이트를 직접 클릭하지 않고 AI 요약 답변으로 끝내는 비율이 2024년에는 56%였는데, 2025년에는 69%까지 올라갔어요. 열 명 중 일곱 명은 AI가 정리해 준 답변만 보고 끝낸다는 거예요.

이메일 마케팅 서비스 메일침프(Mailchimp)는 이 변화를 직접 체감하고 웹사이트 트래픽이 급감하자, AI 크롤러에 맞춰 사이트 전체 구조를 뜯어고쳤어요. 가트너의 예측에 따르면 2026년까지 전통적인 검색 볼륨이 25% 감소하고, 유기적 검색 트래픽은 50% 이상 감소할 거라고 해요.

AI 답변에 내 콘텐츠가 포함되느냐 아니냐, 그게 앞으로의 트래픽을 좌우할 거예요.

AI 최적화에서 가장 중요한 두 가지, 순서와 깊이

기술적인 얘기지만 개념만 이해해도 충분히 적용할 수 있어요.

첫 번째는 콘텐츠 순서예요. AI 에이전트는 문서를 앞에서부터 읽어요. 중요한 정보, 핵심 링크, 주요 기능 설명이 문서 앞쪽에 있어야 해요. 소설처럼 결론을 뒤에 숨겨두는 방식은 AI에게 통하지 않아요. 가장 중요한 것을 가장 먼저 써야 해요.

두 번째는 구조의 깊이예요. 홈 → 서비스 소개 → 상품 안내 → 상품 상세 → 가격 정보처럼 4~5단계를 거쳐야 원하는 정보에 도달하는 구조는 AI에게 매우 비효율적이에요. 중요한 정보일수록 홈에서 1~2번만 클릭하면 닿을 수 있는 얕은 구조로 배치해야 해요.

이 두 원칙이 사실 좋은 UX의 기본 원칙과도 같아요. 사람에게 불편한 복잡한 구조는 AI에게도 마찬가지로 비효율적이에요. 다만 AI는 한계가 더 명확하기 때문에, 이 원칙을 훨씬 더 엄격하게 지켜야 해요.

GEO 전문가들이 강조하는 공식도 비슷해요. 핵심 요약을 200자 이내로 먼저 쓰고, 배경 설명, 핵심 인사이트 3가지, 실행 방안, 예상 결과 순서로 구성하는 구조화 방식이 AI 인용 가능성을 크게 높인다고 해요.

블로거라면 지금 당장 할 수 있는 것 3가지

거창하게 시작할 필요 없어요. 작은 것부터 적용해 보세요.

하나, 각 글의 핵심 결론을 첫 두 문단 안에 담아주세요. 챗GPT나 AI 오버뷰가 글을 인용할 때 앞부분을 가장 많이 활용해요. 결론을 맨 뒤에 두는 습관을 버리는 것, 그것만으로도 AI 인용 확률이 달라져요.

둘, 서비스나 브랜드 소개 페이지가 있다면 "이게 무엇인지"를 첫 화면에서 바로 알 수 있게 배치해주세요. AI 에이전트는 여러 페이지를 돌아다니며 파악할 여유가 없어요. 첫 페이지에서 전부 설명되어야 해요.

셋, 콘텐츠에 신뢰도를 더해주세요. 통계 수치나 연도를 명시하고, 구체적인 사례를 포함시키면 AI가 신뢰할 만한 출처로 인식할 가능성이 높아져요. "2025년", "2026년" 같은 최신 날짜 표기도 AI 인용 우선순위에 영향을 줘요.

SEO가 살아있을 때 GEO도 함께 준비해야 해요

중요한 건, GEO가 SEO를 대체하는 게 아니라는 점이에요.

생성형 AI가 답변을 만들 때 가장 먼저 참고하는 건 웹에 이미 존재하는 신뢰도 높은 정보예요. 그 정보는 결국 검색엔진이 잘 수집해서 인덱싱한 웹페이지, 즉 SEO가 잘된 콘텐츠에서 나와요.

SEO를 기반으로 하되, GEO를 함께 고려하는 방식이 지금 가장 현명한 전략이에요.

사람을 위해 SEO를 공부하고, 읽기 좋은 글을 쓰고, 잘 정리된 구조를 만들어온 것처럼, 이제는 AI를 위한 최적화도 함께 고민해야 할 시점이에요. AI가 내 콘텐츠를 제대로 이해하고 추천하게 만들고 싶다면, 오늘 당장 첫 문단부터 다시 써보세요.

지금 시작하는 사람이 3년 뒤에 앞서 있을 거예요.

마무리

AI가 웹 콘텐츠를 읽는 방식은 사람과 완전히 달라요. 컨텍스트 창의 한계로 앞부분만 읽고 넘어가고, 복잡한 구조는 건너뛰어요. GEO(생성형 엔진 최적화)는 이런 AI의 특성에 맞게 콘텐츠를 구성하는 전략이에요. 핵심 내용을 앞에 배치하고, 구조를 단순하게 만들고, 신뢰도 있는 수치를 포함시키는 것만으로도 AI 인용 가능성이 눈에 띄게 달라져요. SEO를 포기하는 게 아니라, SEO 위에 GEO를 쌓아가는 거예요. 오늘 블로그 글의 첫 문단부터 바꿔보세요.