AI Search & GEO menengah
llms.txt: Perlu atau Tidak?
Ini contoh yang bagus tentang cara memutuskan taktik AI Search dengan data alih-alih dengan rasa takut ketinggalan. Usulannya masuk akal, adopsinya nyata, dan bukti bahwa ada sistem yang membacanya tidak ada.
Status per 15 September 2026 · halaman ini ditinjau ulang saat ada perubahan produk
llms.txt adalah usulan (Jeremy Howard, September 2024) untuk berkas Markdown di /llms.txt yang berisi ringkasan situs dan tautan ke halaman-halaman penting, dimaksudkan untuk dibaca model bahasa besar saat inferensi. Per September 2026, tidak ada vendor AI besar (Google, OpenAI, Anthropic, Perplexity, Microsoft) yang mengonfirmasi membacanya, dan studi log menunjukkan sebagian besar berkas yang ada tidak pernah diminta.
Apa isinya
# Nama Situs
> Satu paragraf ringkasan tentang situs ini.
## Panduan utama
- [Canonical Tag](https://www.example.com/technical-seo/canonical/): sinyal URL representatif
- [Robots.txt](https://www.example.com/technical-seo/robots-txt/): aturan crawling
## Optional
- [Arsip lama](https://www.example.com/arsip/)Usulan aslinya juga menyebut llms-full.txt (seluruh konten dalam satu berkas) dan varian .md untuk tiap halaman. Idenya: LLM punya jendela konteks terbatas dan HTML penuh navigasi memboroskannya, jadi sediakan versi bersih.
Bukti yang ada
| Pernyataan atau data | Sumber | Status |
|---|---|---|
| John Mueller (Google): tidak ada sistem Google yang membaca llms.txt; ia menyamakannya dengan meta keywords | Pernyataan publik 2025, dikutip Search Engine Journal dan lainnya | terdokumentasi |
| Google: "no special optimizations necessary" untuk AI Overviews/AI Mode | Dokumentasi Google | terdokumentasi |
| Ahrefs (2026): dari ~137 ribu situs yang dianalisis, ~38 ribu punya llms.txt valid, dan 97% di antaranya tidak pernah diminta oleh crawler mana pun dalam sebulan pengamatan | Ahrefs blog | terdokumentasi untuk datanya; generalisasi ke semua situs adalah hipotesis industri |
| SE Ranking (2026): adopsi ~10% dari 300 ribu domain; di antara 50 domain yang paling sering dikutip AI, hanya satu yang punya | SE Ranking | terdokumentasi untuk datanya |
| Tidak ada dokumentasi OpenAI, Anthropic, atau Perplexity yang menyebut llms.txt | Dokumentasi crawler masing-masing | terdokumentasi |
| Beberapa alat developer (dokumentasi API, framework) memakai llms.txt untuk asisten koding | Pengamatan | terdokumentasi — kasus penggunaan yang berbeda: pengguna menempel URL ke asisten, bukan mesin pencari yang membacanya |
Cara membacanya
Ada dua hal berbeda yang sering dicampur. Pertama, mesin pencari AI (AI Overviews, ChatGPT search, Perplexity) membangun jawaban dari indeks web. Untuk ini, tidak ada bukti llms.txt dibaca, dan dokumentasi vendor tidak menyebutnya. Kedua, asisten koding dan agen (Cursor, Claude Code, dan sejenisnya) kadang diberi URL dokumentasi oleh penggunanya, dan versi Markdown yang bersih memang lebih mudah dicerna. Untuk kasus kedua, llms.txt atau halaman .md berguna sebagai kenyamanan bagi pengguna yang tahu. Itu bukan SEO.
Keputusan yang masuk akal
| Jenis situs | Keputusan | Alasan |
|---|---|---|
| Situs konten, bisnis, e-commerce | Tidak perlu | Tidak ada sistem pencarian yang membacanya; waktu lebih baik dipakai untuk hal yang terdokumentasi |
| Dokumentasi produk developer / API | Boleh, sebagai layanan untuk pengguna asisten koding | Ada kasus penggunaan nyata, walau kecil; biayanya rendah kalau dibuat otomatis |
| Semua | Jangan membayar untuk itu, dan jangan menjadikannya klaim "sudah siap AI" | Klaim tanpa mekanisme |
Kalau tetap ingin memasangnya untuk situs biasa, tidak ada ruginya selain waktu, asalkan isinya dibuat otomatis dari sitemap supaya tidak usang. Yang merugikan adalah menganggapnya sudah menyelesaikan "AI Search", lalu melewatkan hal-hal yang benar-benar menentukan: crawler yang diizinkan, halaman yang terindeks, jawaban yang jelas.
Keputusan situs ini
masahmadsafwan.com tidak memasang llms.txt. Kalau kelak ada vendor pencarian yang mendokumentasikan dukungannya, keputusan ini ditinjau dan halaman ini diperbarui dengan tanggal.
Rujukan
- llms.txt proposal Jeremy Howard, 2024
- We analyzed 137K sites: 97% of llms.txt files never get read Ahrefs, 2026
- Google confirms llms.txt has no current implementation Search Engine Journal
- AI features and your website Google Search Central