Crawler AI membaca HTML yang dikirim server dan tidak menjalankan JavaScript. Kami membaca beranda 486 situs paling banyak dikunjungi dengan cara yang sama dan menghitung data terstruktur di dalamnya.
sameAs.SearchAction.Analisis trafik crawler Vercel pada Desember 2024 menemukan bahwa “none of the major AI crawlers currently render JavaScript”, termasuk GPTBot, ClaudeBot, dan PerplexityBot (Vercel). Googlebot merender halaman; crawler AI, menurut analisis itu, mengambil apa yang dikirim server. Jadi JSON-LD yang disisipkan tag manager, atau beranda yang dibangun sepenuhnya di peramban, bisa tampak lengkap di peramban Anda tetapi kosong bagi mereka. Semua di halaman ini diukur dengan cara itu: satu permintaan, tanpa JavaScript.
| Ukuran | Beranda | Porsi |
|---|---|---|
| Ada JSON-LD | 231 | 47.5% |
| Ada data terstruktur (JSON-LD, microdata, atau RDFa) | 252 | 51.9% |
| Microdata atau RDFa | 49 | 10.1% |
| Node Organization atau Corporation | 152 | 31.3% |
… dengan tautan sameAs | 129 | 26.5% |
| Node WebSite | 145 | 29.8% |
| Node FAQPage | 13 | 2.7% |
| JSON-LD yang gagal diurai | 1 | 0.2% |
| Kurang dari 100 kata sebelum JavaScript | 111 | 22.8% |
noindex di beranda | 7 | 1.4% |
Belum ada yang membuktikannya. Google menyatakan tidak perlu markup khusus untuk muncul di AI Overviews atau AI Mode (Google Search Central), dan dokumentasi crawler perusahaan AI tidak menyebut schema. Yang dilakukan node Organization dengan tautan sameAs adalah menyatakan, di satu tempat yang bisa dibaca mesin, siapa Anda dan di mana lagi Anda ada, jenis fakta yang sering keliru di tangan asisten. Panduan kami tentang schema markup dan kutipan AI membahas buktinya.
sameAs ke profil asli Anda.Kami mengambil 10,000 domain teratas dari daftar Tranco GQ3LK (peringkat riset yang menggabungkan data Chrome UX Report, Cloudflare Radar, Cisco Umbrella, Majestic, dan Farsight dari 28 September hingga 27 Oktober 2026). Pada 28 Oktober 2026 crawler kami meminta beranda setiap domain lewat HTTPS, mengikuti pengalihan. Banyak entri Tranco adalah domain CDN, API, atau pelacakan tanpa situs web: 2,155 tidak memberi jawaban HTTP sama sekali dan 1,415 menjawab 403. Kami menyimpan 5,480 domain yang berandanya mengembalikan halaman HTML dengan status 200, dihitung sekali per hostname akhir setelah pengalihan. Bagian studi ini memakai 486 situs di peringkat 1,000 teratas; 3 beranda di atas 3 MB dikecualikan.
Setiap beranda dibaca dengan parser di balik pemeriksa data terstruktur kami: blok JSON-LD, jenis schema.org-nya, atribut microdata dan RDFa, meta tag robots dan header X-Robots-Tag, serta jumlah kata teks yang terlihat di HTML sebagaimana disajikan. Jenis dihitung sekali per beranda, termasuk node bersarang. Hanya beranda yang diukur; halaman produk dan artikel biasanya memuat lebih banyak markup. Crawler kami mengidentifikasi diri sebagai Mentioned-Research/1.0. Situs yang menolak bot tak dikenal di firewall tidak masuk sampel, dan situs-situs itu kemungkinan juga lebih ketat terhadap crawler AI, jadi anggap setiap tingkat blokir di sini sebagai batas bawah, bukan estimasi untuk seluruh web.
Anda boleh mengutip dan membuat grafik dari angka-angka ini dengan menautkan kembali ke halaman ini. Kutipan yang disarankan: Mentioned, “Structured Data on the Top 1,000 Homepages: What AI Crawlers See,” 28 Oktober 2026, https://mentioned.at/learn/homepage-structured-data-study. Data dan teks diterbitkan di bawah CC BY 4.0.
Dalam perayapan Oktober 2026 kami, 47.5% dari 486 beranda di Tranco 1,000 teratas memuat JSON-LD di HTML mentahnya, dan 51.9% memuat data terstruktur dalam bentuk apa pun.
WebSite, di 29.8% beranda, disusul Organization di 28.2% (Corporation menambah 22 lagi) dan WebPage di 20.0%.
Analisis crawler Vercel pada Desember 2024 menemukan bahwa tidak ada crawler AI besar yang merender JavaScript, jadi markup yang ditambahkan di peramban kemungkinan tidak terlihat oleh mereka. Letakkan di HTML yang dikirim server Anda.