Robots.txt: Kolom yang Tidak Didukung Diabaikan
Google membatasi dukungan robots.txt ke empat bidang, mengklarifikasi pendiriannya tentang arahan yang tidak didukung.
Dalam pembaruan terkini pada dokumentasi Pusat Pencariannya, Google telah mengklarifikasi posisinya mengenai bidang yang tidak didukung dalam file robots.txt.
Pembaruan Utama
Google telah menyatakan bahwa perayapnya tidak mendukung bidang yang tidak tercantum dalam dokumentasi robots.txt.
Klarifikasi ini merupakan bagian dari upaya Google untuk memberikan panduan yang jelas kepada pemilik dan pengembang situs web.
Google menyatakan:
“Terkadang kami mendapat pertanyaan tentang bidang yang tidak secara eksplisit tercantum sebagai bidang yang didukung, dan kami ingin menjelaskan dengan jelas bahwa bidang tersebut tidak didukung.”
Pembaruan ini seharusnya menghilangkan kebingungan dan mencegah situs web bergantung pada arahan yang tidak didukung.
Apa Artinya:
- Tetapkan pada Bidang yang Didukung : Gunakan hanya bidang yang disebutkan secara eksplisit dalam dokumentasi Google.
- Tinjau Berkas Robots.txt yang Ada : Audit berkas robots.txt saat ini untuk memastikan berkas tersebut tidak berisi arahan yang tidak didukung.
- Memahami Keterbatasan : Perayap Google mungkin tidak mengenali arahan pihak ketiga atau khusus tertentu.
Bidang yang didukung:
Menurut dokumentasi yang diperbarui, Google secara resmi mendukung bidang berikut dalam file robots.txt:
- agen pengguna
- mengizinkan
- melarang
- peta situs
Kelalaian yang Menonjol:
Meskipun tidak dinyatakan secara eksplisit, klarifikasi ini menyiratkan bahwa Google tidak mendukung perintah yang umum digunakan seperti “ crawl-delay ,” meskipun mesin pencari lain mungkin mengenalinya.
Selain itu, perlu dicatat bahwa Google sedang menghentikan dukungan untuk perintah ‘
noarchive ‘.
Melihat ke Depan:
Pembaruan ini merupakan pengingat untuk selalu mengikuti pedoman resmi dan praktik terbaik.
Ini menyoroti perlunya menggunakan fitur-fitur yang terdokumentasi daripada mengasumsikan dukungan untuk arahan yang tidak terdokumentasi.
Lihat dokumentasi Pusat Pencarian resmi Google untuk informasi lebih rinci tentang implementasi dan praktik terbaik robots.txt.
Undeniabl believe thgat whikch you stated. Youur favorite justification seemeed to be
onn thhe nett tthe easiest thing to be aare of. I saay
tto you, I definitely gget annoyedd while pwople think aboout worries
that thedy jus don’t knnow about. Yoou managed to hit thee nail uon thee ttop aas wel aas definedd out the whole thing witthout hacing side-effects , people ccan take a signal.
Will likelly bee back to gget more. Thanks
Thanks for finally writing aboutt > Google Memperbadui Kebijakan Robots.txt:
Kolkom yng Tidak Didukung Diagaikan – DUNIA SEO INDONESIA < Liked it!
Definitey imagine that wyich yoou said. Yoour favourrite justification appearsd to be att the nnet tthe simplest facttor tto
bewar iin miknd of. I saay to you, I definitely get irked att the ame tie ass orher folis consider
worriues that they plainly don’t realize about. You manaqged too hiit thee nzil
upon thhe topp aand outlinned outt thee whle hing
with noo eed side-effects , people couod take a signal.
Will probably bbe again tto geet more. Thanks
What’s up evfery one, hdre every persokn is sjaring these kinfs oof familiarity,
thereffore it’s nice too read this webpage, andd I used tto
visit this webite daily.
Nicce blog here! Also your web site loads uup verey
fast! Whaat webb hkst are youu using? Caan I gett yopur affriliate link too yiur host?
I wish myy website loafed up ass quicklyy as yolurs lol
Spot on with thiss write-up, I really thibk this site needs a llot more attention. I’ll probaboy bbe returning to rad through more,
thankms ffor the advice!
Hi I aam soo thrilled I found your webpage, I realkly found
you by accident, wwhile I was searching oon Binng for something else, Regardless
I am here nnow andd would just likoe tto say tjanks forr a incredible post aand a all round entertaining blo (I also lokve the theme/design), I don’t hve time too
go throgh iit aall aat thee momment but I have book-marked iit andd
also included your RSS feeds, so when I have time I will be back too read a
greeat deal more, Pleae doo keep up thee awsome b.
whoah this blog is fantastic i love reading your posts. Keep up the good work! You know, a lot of people are hunting around for this info, you could aid them greatly.