llms.txt는 언어 모델을 위한 웹사이트의 마크다운 지도로, 2024년에 제안되었습니다. 가장 인기 있는 웹사이트 5,480곳이 이를 게시하는지, 형식을 따르는지 확인했습니다.
/llms.txt에 웹 페이지를 반환합니다. 대개 홈페이지이며, 브라우저에서는 파일처럼 보이지만 파서에게는 아무것도 아닙니다.도입률은 순위가 내려갈수록 낮아져, 상위 1,000의 22.5%에서 9,001–10,000위대의 10.6%까지 떨어지지만 고르지는 않습니다. 2,001–3,000위대는 최상위와 같은 수준입니다. 초기 목록의 상당수는 소프트웨어와 인프라 회사입니다. 읽을 수 있었던 상위 200 중 도입한 곳은 cloudflare.com, fastly.com, wordpress.org, adobe.com, digicert.com, opera.com, sentry.io, intuit.com, samsung.com, dropbox.com, gravatar.com, kaspersky.com, ubuntu.com, shopify.com입니다.
| 측정 항목 | 파일 | llms.txt 파일 중 비율 |
|---|---|---|
| 사이트 이름을 담은 H1로 시작 | 839 | 95% |
| 인용 블록 요약이 있음 | 687 | 78% |
| llmstxt.org 구조를 따름 | 414 | 47% |
| 링크가 전혀 없음 | 122 | 14% |
| llms-full.txt도 게시 | 135 | 15% |
| 100,000자 초과 | 59 | 6.7% |
llmstxt.org 형식은 짧습니다. 사이트 이름을 담은 H1 하나, 선택적인 인용 블록 요약, 선택적인 문단, 그리고 링크 목록만 담는 H2 섹션입니다. 가장 많이 발견한 실수 세 가지는 다음과 같습니다.
- [name](url): notes 항목에만 쓰도록 정해 두었으므로, 사양을 따르는 리더는 나머지를 건너뜁니다.주요 어시스턴트가 확인한 방식으로는 아닙니다. Google은 AI Overviews나 AI Mode에 나오기 위해 “don’t need to create new machine readable files, AI text files, or markup”이라고 분명히 말하며(Google Search Central), OpenAI, Anthropic, Perplexity의 크롤러 문서도 llms.txt를 언급하지 않습니다. 오늘날 가장 분명한 독자는 코딩 에이전트와 문서화 도구입니다. 그러니 16.1%라는 수치는 순위 요인이 아니라, 20분을 들일 가치가 있다고 판단한 팀의 수를 보여 줍니다. 무엇을 넣을지는 llms.txt란 가이드에서 다룹니다.
/llms.txt를 열고 소스를 보세요. 홈페이지 HTML이 보인다면 llms.txt가 없는 것입니다.Tranco 목록 GQ3LK(Chrome UX Report, Cloudflare Radar, Cisco Umbrella, Majestic, Farsight의 2026년 9월 28일~10월 27일 데이터를 결합한 연구용 순위)의 상위 10,000개 도메인을 대상으로 했습니다. 2026년 10월 28일, 저희 크롤러가 각 도메인의 홈페이지를 HTTPS로 요청하고 리디렉션을 따라갔습니다. Tranco 항목 상당수는 웹사이트가 없는 CDN, API, 추적용 도메인으로, 2,155곳은 HTTP 응답이 전혀 없었고 1,415곳은 403을 반환했습니다. 홈페이지가 상태 200의 HTML 페이지를 반환한 5,480개 도메인을 남겼고, 리디렉션 후 최종 호스트 이름당 한 번씩 셌습니다.
각 사이트에 대해 최종 호스트 이름으로 /llms.txt를 요청했습니다. 응답이 200이고, HTML이 아니며, 마크다운으로 읽히는 경우(맨 위 가까이에 제목이나 마크다운 링크가 있음) 파일이 있는 것으로 셌습니다. 617곳은 HTML을, 44곳은 다른 것(대부분 JSON 오류 본문)을, 3,789곳은 404나 다른 4xx를 반환했고, 149곳은 실패했습니다. 구조는 저희 llms.txt 검증기의 검증 엔진으로 확인했으며, “따름”은 llmstxt.org 형식 대비 오류가 없다는 뜻이고 경고는 허용했습니다. /llms-full.txt도 요청했습니다.
저희 크롤러는 Mentioned-Research/1.0으로 자신을 밝혔습니다. 알 수 없는 봇을 방화벽에서 거부하는 사이트는 표본에서 빠졌고, 그런 사이트는 아마 AI 크롤러에도 더 엄격할 것이므로, 여기의 차단 비율은 웹 전체의 추정치가 아니라 하한으로 보세요. 수치는 웹 전체가 아니라 인기 웹사이트를, 그리고 2026년 10월의 하루를 나타냅니다.
이 수치는 이 페이지로 링크를 걸어 자유롭게 인용하고 차트로 만들 수 있습니다. 권장 인용 표기: Mentioned, “llms.txt Adoption: How Many of the Top 10,000 Sites Have One?,” 2026년 10월 28일, https://mentioned.at/learn/llms-txt-adoption. 데이터와 본문은 CC BY 4.0으로 공개합니다.
2026년 10월 Tranco 상위 10,000 크롤링에서 접근 가능한 5,480개 웹사이트 중 881곳(16.1%)이 llms.txt를 제공했습니다. 상위 1,000에서는 22.5%였습니다.
약 절반입니다. 찾은 881개 파일 중 414개(47%)가 llmstxt.org 형식 대비 구조 오류가 없었습니다. 가장 흔한 실수는 H2 링크 섹션 안의 줄글이었습니다.
주요 어시스턴트 중 답변할 때 사이트의 llms.txt를 읽는다고 밝힌 곳은 없습니다. Google은 AI Overviews나 AI Mode에 특별한 AI용 텍스트 파일이 필요 없다고 말합니다.