Pelajari

Adopsi llms.txt: Berapa Banyak dari 10,000 Situs Teratas yang Punya?

llms.txt adalah peta markdown sebuah situs untuk model bahasa, diusulkan pada 2024. Kami memeriksa apakah 5,480 situs paling populer menerbitkannya, dan apakah file itu mengikuti format.

Kisi kartu situs web, beberapa di antaranya membawa file llms.txt
Riset

Temuan utama

Situs dengan llms.txt, menurut peringkat TrancoPorsi situs di setiap kelompok 1,000, 28 Oktober 2026
1–1,00022.5%
1,001–2,00012.4%
2,001–3,00022.7%
3,001–4,00019.2%
4,001–5,00017.5%
5,001–6,00018.0%
6,001–7,00015.3%
7,001–8,00012.6%
8,001–9,00012.7%
9,001–10,00010.6%

Adopsi menurun seiring peringkat, dari 22.5% di 1,000 teratas ke 10.6% di kelompok 9,001–10,000, meski tidak mulus: kelompok 2,001–3,000 setara dengan puncak. Perusahaan perangkat lunak dan infrastruktur mendominasi daftar awal. Di 200 teratas yang bisa kami baca, pengadopsinya antara lain cloudflare.com, fastly.com, wordpress.org, adobe.com, digicert.com, opera.com, sentry.io, intuit.com, samsung.com, dropbox.com, gravatar.com, kaspersky.com, ubuntu.com, shopify.com.

Seperti apa file-filenya

UkuranFilePorsi file llms.txt
Diawali H1 yang menyebut nama situs83995%
Punya ringkasan blockquote68778%
Sesuai struktur llmstxt.org41447%
Tidak memuat tautan sama sekali12214%
Juga menerbitkan llms-full.txt13515%
Lebih dari 100,000 karakter596.7%

Format llmstxt.org singkat: satu H1 dengan nama situs, ringkasan blockquote opsional, paragraf opsional, lalu bagian H2 yang hanya berisi daftar tautan. Tiga kesalahan yang paling sering kami temukan:

Apakah ada yang membacanya?

Tidak dengan cara yang dikonfirmasi asisten besar. Google dengan jelas menyatakan Anda “don’t need to create new machine readable files, AI text files, or markup” untuk muncul di AI Overviews atau AI Mode (Google Search Central), dan dokumentasi crawler OpenAI, Anthropic, dan Perplexity tidak menyebut llms.txt. Pembacanya yang paling jelas saat ini adalah agen coding dan alat dokumentasi. Jadi angka 16.1% mengukur berapa banyak tim yang memutuskan file ini layak diberi dua puluh menit, bukan faktor peringkat. Panduan kami Apa itu llms.txt membahas apa yang perlu dimasukkan.

Jika Anda menerbitkannya

  1. Pastikan yang dikembalikan adalah file. Buka /llms.txt dan lihat kode sumbernya. Jika Anda melihat HTML beranda, berarti Anda belum punya.
  2. Batasi bagian hanya untuk tautan. Taruh penjelasan apa pun di ringkasan atau di paragraf sebelum H2 pertama.
  3. Jadikan indeks. Daftar halaman yang menjawab pertanyaan pembeli, dengan catatan untuk masing-masing, lebih baik daripada salinan situs Anda.
  4. Izinkan crawler masuk. File yang ditulis untuk model bahasa tak banyak membantu jika robots.txt memblokir crawler yang akan mengambilnya. Lihat situs mana yang memblokir crawler AI.
  5. Validasi. Validator llms.txt memakai kode yang sama dengan yang kami pakai di sini.

Metode dan batasan

Kami mengambil 10,000 domain teratas dari daftar Tranco GQ3LK (peringkat riset yang menggabungkan data Chrome UX Report, Cloudflare Radar, Cisco Umbrella, Majestic, dan Farsight dari 28 September hingga 27 Oktober 2026). Pada 28 Oktober 2026 crawler kami meminta beranda setiap domain lewat HTTPS, mengikuti pengalihan. Banyak entri Tranco adalah domain CDN, API, atau pelacakan tanpa situs web: 2,155 tidak memberi jawaban HTTP sama sekali dan 1,415 menjawab 403. Kami menyimpan 5,480 domain yang berandanya mengembalikan halaman HTML dengan status 200, dihitung sekali per hostname akhir setelah pengalihan.

Untuk setiap situs kami meminta /llms.txt di hostname akhir. Kami menghitung situs memilikinya jika jawabannya 200, bukan HTML, dan terbaca sebagai markdown (ada judul atau tautan markdown di dekat bagian atas). 617 situs mengembalikan HTML, 44 mengembalikan hal lain (kebanyakan isi galat JSON), 3,789 mengembalikan 404 atau 4xx lain, dan 149 gagal. Struktur diperiksa dengan validator di balik validator llms.txt kami; “sesuai” berarti tidak ada kesalahan terhadap format llmstxt.org, peringatan diperbolehkan. Kami juga meminta /llms-full.txt.

Crawler kami mengidentifikasi diri sebagai Mentioned-Research/1.0. Situs yang menolak bot tak dikenal di firewall tidak masuk sampel, dan situs-situs itu kemungkinan juga lebih ketat terhadap crawler AI, jadi anggap setiap tingkat blokir di sini sebagai batas bawah, bukan estimasi untuk seluruh web. Angka-angka ini menggambarkan situs populer, bukan web secara umum, dan satu hari di Oktober 2026.

Kutip ini

Anda boleh mengutip dan membuat grafik dari angka-angka ini dengan menautkan kembali ke halaman ini. Kutipan yang disarankan: Mentioned, “llms.txt Adoption: How Many of the Top 10,000 Sites Have One?,” 28 Oktober 2026, https://mentioned.at/learn/llms-txt-adoption. Data dan teks diterbitkan di bawah CC BY 4.0.

Pertanyaan

Berapa banyak situs yang punya file llms.txt?

Dalam perayapan Tranco 10,000 teratas pada Oktober 2026, 881 dari 5,480 situs yang bisa dijangkau (16.1%) menyajikan llms.txt. Di 1,000 teratas porsinya 22.5%.

Apakah sebagian besar file llms.txt mengikuti spesifikasi?

Sekitar separuh. 414 dari 881 file yang kami temukan (47%) tidak punya kesalahan struktur terhadap format llmstxt.org. Kesalahan yang paling umum adalah teks paragraf di dalam bagian tautan H2.

Apakah ChatGPT atau Google membaca llms.txt?

Tidak ada asisten besar yang menyatakan membaca llms.txt sebuah situs saat menjawab. Google menyatakan tidak perlu file teks AI khusus untuk AI Overviews atau AI Mode.

Jalankan pengecekan gratis