Cara Atasi Masalah Index URL di Webmaster

Akhir-akhir ini banyak masalah yang dikeluhkan blogger terkait pengindekan di Google Webmaster / Search Console. Masalah pengindekan ini menyebabkan banyak postingan baru di web tidak terindeks dengan baik di Mesin Pencari / Search Engine Google. Tampaknya ini merupakan salah satu bentuk perbaikan pada Google Webmaster / Search Console. Google Webmaster / Search Console ada perbaikan dalam membaca robot.txt. Fungsi robot.txt ini sangat berpengaruh dalam pengidekan di Search Engine, sehingga apabila kita salah dalam melakukan setting atau pengaturan yang diterapkan di robot.txt akan bermasalah dalam pengindekan di mesin pencari google.

Pada pembaharuan / update pada fitur google webmaster ini, salah satu masalah yang umum terjadi adalah Error Index Coverage / URL yang dicekal robot.txt. Jika masalah ini tidak segera diperbaiki tentu saja akan berpengaruh pada Optimasi pada Penelusuran Google (SEO), dan tentu saya pengaruh pada pengunjung blog kita. Untuk itu kali ini saya akan membahas bagaimana mengtasi masalah mengindekan tersebut.

Cara mengatasi permasalahan tersebut adalah sebagai berikut:

buka blogger.com
Setelan - Preferensi Penelusuran - robots.txt khusus - klik edit

Ubah isi robot.txt

User-agent: *
Disallow: /search
Allow: /
Sitemap: https://www.firefudh.com/sitemap.xml

Kemudian saya ganti formatnya menjadi seperti dibawah ini:

User-agent: *
Disallow: /
Allow: /
Sitemap: https://www.firefudh.com/sitemap.xml

Simpan perubahan

Semalam saya ganti, dan pagi ini saya kembali melakukan pengecekan di search engine Google, dan hasilnya sangat baik. Postingan baru saya yang kemaren belum terindek. hari ini sudah terindeks. Hasil penelusuran kesalahan terdapat pada "/search".

Untuk menguji robot.txt kita dapat mengujinya di Google Webmaster pada: