CARA MENGATASI LINK BLOG YANG DICEKAL OLEH ROBOTS.TXT PADA GOOGLE

banyak orang yang bingung kenapa web atau blognya dicekal atau gk bisa di index oleh search engine. seperti blog ini pernah dicekal karena tidak diketahui masalahnya. sehingga mengalami kemerosotan pengunjung. namun setelah browsing-browsing. akhirnya ketemu juga cara mengatasinya
Jika anda yang masih belum tahu apakah url anda dicekal atau tidak, silahkan anda berkunjung ke Google Webmaster , Klik pada "Kesehatan" kemudian anda klik "URL yang dicekal" jika pada blog anda terdapat URL yang dicekal anda akan menemukan keterangan halaman seperti gambar dibawah ini.

Yang lebih jelasnya seperti ini:

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: http://faridelly.blogspot.com/feeds/posts/default?orderby=UPDATED

Untuk cara menghilangkan URL yang dicekal Robots.txt pada kode di atas, anda hilangkan tulisan yang saya tandai dengan warna merah sehingga mendjadi seperti dibawah ini:

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow:
Allow: /

Sitemap: http://horeblogging.blogspot.com/feeds/posts/default?orderby=UPDATED

Dan anda ganti http://horeblogging.blogspot.com dengan URL Blog anda kemudian:

1. Login ke blog anda
2. Pergi ke Setelan >> Preferense Penelusuran
3. Pada kolom Perayapan dan pengindeksan pilih edit di menu Robots.txt
4. Kemudian Aktifkan Robots.txt Khusus
5. Masukkan kode yang kedua yang telah dirubah tadi (yang telah dihilangkan tulisan "/search" tulisan yang bertanda merah tadi)

Catatan:

Kode yang anda masukkan pada "Robots.txt Khusus" pastikan sudah anda hilangkan tulisan "/seach" pada Disallow. Karena jika masih ada tulisan "/search" pada tulisan Disallow atau Disallow masih tertulis seperti ini "Disallow:/" masih ada garis miringnya saja, itu artinya anda melarang Google untuk mengindeks konten blog anda.

nah sekian cara untuk mengatasi link yang dicekal oleh robots.txt

ARTIKEL TERKAIT: