배우기

llms.txt 도입 현황: 상위 10,000 사이트 중 몇 곳이 갖고 있을까?

llms.txt는 언어 모델을 위한 웹사이트의 마크다운 지도로, 2024년에 제안되었습니다. 가장 인기 있는 웹사이트 5,480곳이 이를 게시하는지, 형식을 따르는지 확인했습니다.

웹사이트 카드 격자, 그중 몇 개에 llms.txt 파일이 있음
리서치

핵심 결과

llms.txt가 있는 사이트, Tranco 순위별1,000 단위 순위대별 비율, 2026년 10월 28일
1–1,00022.5%
1,001–2,00012.4%
2,001–3,00022.7%
3,001–4,00019.2%
4,001–5,00017.5%
5,001–6,00018.0%
6,001–7,00015.3%
7,001–8,00012.6%
8,001–9,00012.7%
9,001–10,00010.6%

도입률은 순위가 내려갈수록 낮아져, 상위 1,000의 22.5%에서 9,001–10,000위대의 10.6%까지 떨어지지만 고르지는 않습니다. 2,001–3,000위대는 최상위와 같은 수준입니다. 초기 목록의 상당수는 소프트웨어와 인프라 회사입니다. 읽을 수 있었던 상위 200 중 도입한 곳은 cloudflare.com, fastly.com, wordpress.org, adobe.com, digicert.com, opera.com, sentry.io, intuit.com, samsung.com, dropbox.com, gravatar.com, kaspersky.com, ubuntu.com, shopify.com입니다.

파일의 모습

측정 항목파일llms.txt 파일 중 비율
사이트 이름을 담은 H1로 시작83995%
인용 블록 요약이 있음68778%
llmstxt.org 구조를 따름41447%
링크가 전혀 없음12214%
llms-full.txt도 게시13515%
100,000자 초과596.7%

llmstxt.org 형식은 짧습니다. 사이트 이름을 담은 H1 하나, 선택적인 인용 블록 요약, 선택적인 문단, 그리고 링크 목록만 담는 H2 섹션입니다. 가장 많이 발견한 실수 세 가지는 다음과 같습니다.

읽는 곳이 있을까?

주요 어시스턴트가 확인한 방식으로는 아닙니다. Google은 AI Overviews나 AI Mode에 나오기 위해 “don’t need to create new machine readable files, AI text files, or markup”이라고 분명히 말하며(Google Search Central), OpenAI, Anthropic, Perplexity의 크롤러 문서도 llms.txt를 언급하지 않습니다. 오늘날 가장 분명한 독자는 코딩 에이전트와 문서화 도구입니다. 그러니 16.1%라는 수치는 순위 요인이 아니라, 20분을 들일 가치가 있다고 판단한 팀의 수를 보여 줍니다. 무엇을 넣을지는 llms.txt란 가이드에서 다룹니다.

게시한다면

  1. 파일이 반환되는지 확인하세요. /llms.txt를 열고 소스를 보세요. 홈페이지 HTML이 보인다면 llms.txt가 없는 것입니다.
  2. 섹션에는 링크만 두세요. 설명은 요약이나 첫 H2 앞의 문단에 쓰세요.
  3. 목차로 유지하세요. 구매자 질문에 답하는 페이지 목록에 각각 짧은 메모를 단 것이 사이트 복사본보다 낫습니다.
  4. 크롤러를 허용하세요. 언어 모델을 위해 쓴 파일도 robots.txt가 그것을 가져갈 크롤러를 차단하면 별 도움이 안 됩니다. AI 크롤러를 차단하는 사이트를 보세요.
  5. 검증하세요. llms.txt 검증기는 여기서 쓴 것과 같은 코드입니다.

방법과 한계

Tranco 목록 GQ3LK(Chrome UX Report, Cloudflare Radar, Cisco Umbrella, Majestic, Farsight의 2026년 9월 28일~10월 27일 데이터를 결합한 연구용 순위)의 상위 10,000개 도메인을 대상으로 했습니다. 2026년 10월 28일, 저희 크롤러가 각 도메인의 홈페이지를 HTTPS로 요청하고 리디렉션을 따라갔습니다. Tranco 항목 상당수는 웹사이트가 없는 CDN, API, 추적용 도메인으로, 2,155곳은 HTTP 응답이 전혀 없었고 1,415곳은 403을 반환했습니다. 홈페이지가 상태 200의 HTML 페이지를 반환한 5,480개 도메인을 남겼고, 리디렉션 후 최종 호스트 이름당 한 번씩 셌습니다.

각 사이트에 대해 최종 호스트 이름으로 /llms.txt를 요청했습니다. 응답이 200이고, HTML이 아니며, 마크다운으로 읽히는 경우(맨 위 가까이에 제목이나 마크다운 링크가 있음) 파일이 있는 것으로 셌습니다. 617곳은 HTML을, 44곳은 다른 것(대부분 JSON 오류 본문)을, 3,789곳은 404나 다른 4xx를 반환했고, 149곳은 실패했습니다. 구조는 저희 llms.txt 검증기의 검증 엔진으로 확인했으며, “따름”은 llmstxt.org 형식 대비 오류가 없다는 뜻이고 경고는 허용했습니다. /llms-full.txt도 요청했습니다.

저희 크롤러는 Mentioned-Research/1.0으로 자신을 밝혔습니다. 알 수 없는 봇을 방화벽에서 거부하는 사이트는 표본에서 빠졌고, 그런 사이트는 아마 AI 크롤러에도 더 엄격할 것이므로, 여기의 차단 비율은 웹 전체의 추정치가 아니라 하한으로 보세요. 수치는 웹 전체가 아니라 인기 웹사이트를, 그리고 2026년 10월의 하루를 나타냅니다.

인용하기

이 수치는 이 페이지로 링크를 걸어 자유롭게 인용하고 차트로 만들 수 있습니다. 권장 인용 표기: Mentioned, “llms.txt Adoption: How Many of the Top 10,000 Sites Have One?,” 2026년 10월 28일, https://mentioned.at/learn/llms-txt-adoption. 데이터와 본문은 CC BY 4.0으로 공개합니다.

질문

llms.txt 파일이 있는 웹사이트는 얼마나 되나요?

2026년 10월 Tranco 상위 10,000 크롤링에서 접근 가능한 5,480개 웹사이트 중 881곳(16.1%)이 llms.txt를 제공했습니다. 상위 1,000에서는 22.5%였습니다.

대부분의 llms.txt 파일은 사양을 따르나요?

약 절반입니다. 찾은 881개 파일 중 414개(47%)가 llmstxt.org 형식 대비 구조 오류가 없었습니다. 가장 흔한 실수는 H2 링크 섹션 안의 줄글이었습니다.

ChatGPT나 Google은 llms.txt를 읽나요?

주요 어시스턴트 중 답변할 때 사이트의 llms.txt를 읽는다고 밝힌 곳은 없습니다. Google은 AI Overviews나 AI Mode에 특별한 AI용 텍스트 파일이 필요 없다고 말합니다.

무료 체크 실행