Cara memperbaiki dan mengatasi URL DICEKAL ROBOT.TXT. Anda dapat mengetahui URL yang dicekal melalui Webmaster tools.
Untuk mengetahui berapa banyak url yang dicekal di blog anda silahkan masuk ke webmaster tools pilih web anda yang ingin anda lihat url yang di cekal kemudian pilih perayapan > Url yang dicekal. Lihat berapa banyak url yang dicekal di blog anda.
Berikut solusi bagaimana cara memperbaiki URL yang di cekal oleh Robot.txt.
1. Pergi ke Setelan > Preferensi dan penelusuran
2. Pada kolom Perayap dan pengindeksan,
3. Klik Edit di bagian kanan robots.txt khusus.
4. Masukan kode dibawah ini
Copy dan paste tulisan di bawah ini
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow:
Allow: /
Sitemap: http://www. berbagi.com/feeds/posts/default?orderby=updated
"ganti warna merah dengan URL blog anda"
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow:
Allow: /
Sitemap: http://www. berbagi.com/feeds/posts/default?orderby=updated
"ganti warna merah dengan URL blog anda"
6. Centang Ya untuk mengaktifkan.
7. Simpan perubahan.
7. Simpan perubahan.
Tunggu kurang lebih dari seminggu untuk memulihkan situs anda. Sekian mengenai bagaimana cara mengatasi url yang di cekal robot.txt dan semoga bermanfaat.
1 komentar
thanks ya mas atas infonya, aku lagi bingung mengatasi advanced blocked by robots ini kenapa. Eh ketemu jawabannya. Sukses terus ya
EmoticonEmoticon