Google baru saja menambahkan audit llms.txt ke dalam Chrome Lighthouse melalui kategori baru bernama Agentic Browsing. Di saat yang hampir bersamaan, dokumentasi Google Search juga menegaskan bahwa file ini tidak digunakan untuk ranking, AI Overviews, atau visibilitas di Google Search.
Sekilas, situasi ini memang terlihat membingungkan bagi praktisi SEO. Namun, jika dilihat lebih dekat, konteksnya berbeda. Google Search berbicara tentang discovery dan ranking, sedangkan Lighthouse berbicara tentang kesiapan situs web untuk diakses dan dipahami oleh agen AI di browser.
Apa Itu Audit Agentic Browsing?
Agentic Browsing adalah audit baru di Lighthouse yang menilai apakah sebuah situs sudah cukup siap digunakan oleh agen AI, bukan hanya oleh manusia. Audit ini tidak menggunakan skor 0-100 seperti kategori Lighthouse lainnya, tetapi menampilkan status pass atau fail pada sejumlah pemeriksaan teknis.
Beberapa hal yang diperiksa antara lain:
- Integrasi WebMCP (Web Model Context Protocol)
- Keutuhan struktur accessibility tree
- Stabilitas tata letak halaman (Cumulative Layout Shift)
- Keberadaan file llms.txt di root domain
Menurut dokumentasi Lighthouse, llms.txt berfungsi sebagai ringkasan machine-readable yang membantu agen AI memahami struktur dasar situs tanpa harus menjelajahi semuanya dari awal. Artinya, file ini lebih dekat sebagai alat bantu pemahaman situs daripada sinyal SEO bagi mesin pencari.
Baca juga: Benarkah Normal SEO Sudah Cukup Untuk AI Overview?
Kenapa Google Terkesan Tidak Konsisten?
Kebingungan muncul karena satu produk Google terlihat menyoroti llms.txt, sementara produk Google lain justru mengatakan bahwa file tersebut tidak diperlukan. Tapi dalam praktiknya, hal ini bukan kontradiksi secara langsung, melainkan perbedaan fokus antarproduk.
Untuk Google Search, llms.txt tidak digunakan untuk crawling, indexing, ranking, atau AI Overviews. Sebaliknya, untuk Lighthouse, file ini dinilai sebagai salah satu cara untuk membantu platform AI lain memahami dan menavigasi situs secara lebih efisien.
Dengan kata lain, pertanyaannya bukan “apakah llms.txt membantu ranking di Google?”, melainkan “apakah llms.txt membantu platform AI seperti ChatGPT untuk mengakses situs dengan lebih mudah?”.
Dari sisi implementasi, praktisi SEO juga perlu menyadari bahwa audit ini masih sangat baru dan bersifat eksperimental. Beberapa sumber teknis menunjukkan bahwa Lighthouse tidak menilai apakah isi llms.txt benar atau bisa dipercaya, melainkan lebih banyak memeriksa apakah file itu ada, bisa dibaca sebagai Markdown, dan memiliki tautan yang sesuai dengan formatnya.
Apakah llms.txt Penting untuk SEO?
Jika konteksnya SEO tradisional, jawabannya tetap sama, tidak wajib. Google sudah menyatakan bahwa membuat file llms.txt tidak akan membantu maupun merugikan visibilitas situs di Google Search karena file tersebut diabaikan oleh sistem pencarinya.
Namun, dari sudut pandang praktisi SEO yang mulai memperhatikan AI search dan traffic dari agen AI, llms.txt tetap layak dipantau. Kehadirannya di Lighthouse menunjukkan bahwa file ini mulai diposisikan sebagai bagian dari praktik web yang relevan untuk ekosistem agentic browsing, meski belum menjadi standar wajib.
Untuk workflow SEO, ini berarti llms.txt sebaiknya ditempatkan sebagai eksperimen berbiaya rendah, bukan sebagai proyek besar. Jika sebuah situs sudah memiliki arsitektur informasi yang rapi, halaman penting yang jelas, dokumentasi produk yang terstruktur, dan performa yang stabil, maka membuat llms.txt bisa menjadi lapisan tambahan.
Akan tetapi, jika fondasi teknisnya masih lemah, dampak perbaikannya kemungkinan jauh lebih kecil dibandingkan dengan membenahi isu inti seperti internal linking, rendering, atau UX halaman utama.
Baca juga: Google Merilis Panduan Optimasi Website Agar Muncul AI Search
Apa Sikap yang Paling Masuk Akal?
Untuk saat ini, praktisi SEO tidak perlu memperlakukan llms.txt sebagai prioritas utama di atas fondasi SEO yang sudah jelas manfaatnya, seperti konten berkualitas, internal linking, schema markup, Core Web Vitals, dan E-E-A-T.
Namun, untuk situs yang mengandalkan dokumentasi, e-commerce, SaaS, atau layanan digital, menyiapkan file llms.txt bisa menjadi langkah tambahan yang murah dan cukup masuk akal untuk eksperimen.
Pendekatan paling aman adalah melihat llms.txt sebagai lapisan pelengkap, bukan sebagai pengganti strategi SEO utama. Jadi, jika targetnya ranking di Google Search, file ini bukan faktor penentu, tetapi jika targetnya kesiapan menghadapi interaksi AI saat ini, sinyal dari Lighthouse patut diperhatikan.
Oleh karena itu, jika Anda butuh konsultasi mengenai optimasi AI SEO maupun website agar tetap sesuai dengan panduan Google, tim Crawl Compass siap membantu. Hubungi tim kami sekarang →
