Tentang File llms.txt
Apa itu file llms.txt?
File llms.txt adalah dokumen Markdown singkat di root situs, di /llms.txt, yang mengarahkan asisten AI ke halaman-halaman yang layak dibaca dan memberikan satu baris yang menjelaskan isi setiap halaman. File ini diusulkan oleh Jeremy Howard dari Answer.AI pada akhir 2024.
File ini dibuat karena model yang membaca halaman secara langsung harus melewati navigasi, banner, dan markup untuk mencapai konten, dengan ruang pemrosesan yang terbatas. Indeks halaman bersih yang dikurasi merupakan titik awal yang lebih baik daripada merayapi semuanya.
Pemeriksa ini mengambil /llms.txt dari domain yang Anda masukkan dan melaporkan apakah file tersebut telah dipublikasikan.
Sebuah konvensi yang masih diadopsi
llms.txt masih tergolong baru, dan para penerbit telah lebih dulu mengadopsinya. Situs dokumentasi mulai menggunakannya sejak awal, dukungan telah tersedia di semakin banyak framework, dan jumlah situs yang menerbitkan llms.txt terus bertambah.
Penyedia AI belum menyatakan komitmen publik untuk membacanya, dan hal ini wajar pada tahap ini—hal yang sama juga terjadi pada peta situs XML dan data terstruktur sebelum keduanya menjadi praktik umum.
Itu menjadikan penerbitan salah satunya sebagai langkah awal yang masuk akal, bukan taktik untuk meningkatkan peringkat: cukup satu sore untuk menulisnya, tidak ada yang perlu dipelihara selain memastikan tautannya tetap terbaru, dan sudah tersedia sebelum dukungan mulai stabil.
Yang terdapat dalam file yang baik
- H1 berisi nama situs atau proyek, yang merupakan satu-satunya baris wajib.
- Blockquote yang merangkum situs dalam satu kalimat.
- Bagian H2, masing-masing berupa daftar tautan yang ditulis dengan nama, URL, dan deskripsi singkat.
- Deskripsi yang menjelaskan apa yang ada di halaman, bukan mengulangi judulnya.
- Bagian dengan judul Opsional untuk tautan yang dapat dilewati saat ruang terbatas.
Selektivitas adalah intinya. Dua puluh halaman yang dideskripsikan dengan baik lebih berguna daripada semua URL yang Anda miliki, dan file yang mencantumkan ratusan URL hanyalah sitemap dengan langkah tambahan.
Yang diperiksa alat ini
Fitur ini meminta /llms.txt di root domain dan melaporkan apakah file tersebut tersedia di sana.
Fitur ini mengonfirmasi keberadaan, bukan menilai isinya, jadi file yang ada tetapi tidak mencantumkan apa pun yang berguna tetap dianggap lolos. Pahami hasilnya sebagai “apakah ini sudah tersedia”, lalu nilai file itu sendiri berdasarkan poin-poin di atas.
Ke mana selanjutnya
Jika Anda belum memilikinya,
Generator llms.txt kami akan membuat file dengan format yang benar berdasarkan detail situs Anda dalam beberapa menit. Kemudian, periksa apakah halaman yang dirujuknya benar-benar dapat dirayapi menggunakan pemeriksa
Perayap AI dan pemeriksa
robots.txt.