llms.txt란 무엇인가요?

llms.txt는 웹사이트 루트 디렉토리(example.com/llms.txt)에 두는 텍스트 파일로, AI 크롤러에게 사이트 구조와 주요 페이지를 소개하는 역할을 합니다. robots.txt가 크롤링 규칙을 정의한다면, llms.txt는 AI가 사이트를 더 잘 이해하도록 요약 정보를 제공합니다. 2024년 9월 Jeremy Howard가 제안했습니다.

llms.txt를 만들면 AI 검색 노출이 증가하나요?

SE Ranking이 30만 개 도메인을 분석한 결과, llms.txt 존재 여부와 AI 인용 빈도 간에 통계적으로 유의미한 상관관계가 없었습니다. 머신러닝 모델에서 llms.txt 변수를 제거하자 오히려 예측 정확도가 향상됐습니다. 현재로서는 효과가 검증되지 않았습니다.

GPTbot이나 ClaudeBot 같은 AI 크롤러가 llms.txt를 읽나요?

Semrush가 Search Engine Land에 llms.txt를 구현하고 3개월간 서버 로그를 분석한 결과, GPTbot, ClaudeBot, PerplexityBot 등 주요 AI 크롤러가 단 한 번도 llms.txt 파일에 접근하지 않았습니다. 현재로서는 AI 크롤러가 llms.txt를 적극적으로 활용한다는 증거가 없습니다.

llms.txt를 사용하는 기업은 얼마나 되나요?

Semrush 조사 기준 전 세계에서 llms.txt를 구현한 도메인은 951개에 불과합니다. SE Ranking 30만 도메인 분석에서는 10.13%만 도입했으며, 트래픽 수준과 무관하게 도입률이 낮았습니다. Anthropic이 지지를 표명했음에도 확산 속도는 느립니다.

llms.txt 기본 구조는 어떻게 되나요?

H1으로 프로젝트명, 블록쿼트로 한 줄 요약, H2 섹션별로 주요 페이지 링크를 나열합니다. 예: # 프로젝트명 > 간단한 소개 ## 섹션 1 - [페이지](URL). GitHub 저장소(answerdotai/llms-txt)에 공식 스펙이 있습니다.

llms.txt가 효과 없는 이유는 무엇인가요?

첫째, AI 크롤러가 아직 llms.txt를 적극적으로 읽지 않습니다. 둘째, 최신 LLM은 HTML 파싱 능력이 뛰어나 Schema.org 마크업만으로도 충분히 이해합니다. 셋째, llms.txt는 아직 표준화되지 않아 각 AI 크롤러가 처리 방법이 다릅니다.

그럼에도 llms.txt를 만들어야 하는 경우가 있나요?

문서 사이트, API 레퍼런스, 개발자 도구처럼 구조화된 정보 제공이 핵심인 사이트는 고려해볼 수 있습니다. Mintlify는 Anthropic의 직접 요청으로 구현했고, Zapier, Hugging Face, Cloudflare도 도입했습니다. 하지만 일반 기업 홈페이지나 블로그에서는 우선순위가 낮습니다.

llms.txt 대신 무엇을 해야 하나요?

첫째, 서버 로그를 모니터링하여 AI 크롤러(GPTbot, ClaudeBot) 접근 패턴을 확인하세요. 둘째, Schema.org 마크업(Product, Article, FAQ)을 우선 구현하세요. 셋째, Fact-Dense Content와 Prompt Mapping 같은 검증된 GEO 전략에 집중하세요. llms.txt는 AI 크롤러 접근이 늘어난 후 고려해도 늦지 않습니다.

AI 크롤러 접근 여부는 어떻게 확인하나요?

웹 서버 로그에서 User-Agent 필드를 검색하세요. GPTbot, ClaudeBot, PerplexityBot, Google-Extended 같은 이름이 보이면 AI 크롤러가 방문한 것입니다. 접근 빈도가 높아지면 그때 llms.txt 구현을 검토하는 것이 합리적입니다.

Vercel은 llms.txt를 사용하나요?

Vercel은 신규 가입의 10%가 ChatGPT 추천에서 발생한다고 밝혔지만, 이것이 llms.txt 때문인지는 명확하지 않습니다. Vercel의 성공은 고품질 문서, Schema 마크업, 개발자 커뮤니티 활동 등 여러 요인의 결과일 가능성이 큽니다.

llms.txt, 도입해야 할까요? 30만 도메인 분석 결과

llms.txt의 실제 효과와 현실적인 대응 전략

Yoonseo Kim2025년 12월 2일

AI가 내 사이트를 읽을 수 있을까요?

무료로 점검해보세요.

사이트 점검하기

조사 항목	결과
llms.txt 만든 사이트 비율	10% (30만 개 중 3만 개)
llms.txt 있는 사이트가 AI 추천 더 많이 받나?	아니오. 차이 없음
대기업들은 많이 쓰나?	아니오. 대기업이나 중소기업이나 비슷

llms.txt, 도입해야 할까요? 30만 도메인 분석 결과

AI가 내 사이트를 읽을 수 있을까요?

추천 콘텐츠

핵심 요약

llms.txt가 뭔가요?

어떻게 생겼나요?

그런데 효과가 있나요?

AI가 이 파일을 읽기는 하나요?

저희도 마찬가지예요

전 세계적으로도 거의 안 씀

그래도 쓰는 회사들이 있나요?

왜 효과가 없을까요?

AI 회사들이 공식적으로 쓴다고 한 적 없음

아직 업계 표준이 아님

그래서 지금 뭘 해야 하나요?

안 해도 되는 것

해도 되는 것

핵심만 정리하면요