Cara Mengaktifkan Robot.txt Default di Blogspot
Jika Anda ingin pengaturan default maka jangan klik "ya", dan jika Anda ingin membatasi URL crawl lainnya Anda harus mengklik "ya" dan menulis di bidang kosong setelah itu klik simpan perubahan. Hati-hati saat membuat pengaturan robots.txt ini, karena jika Anda membuatnya salah itu akan diabaikan oleh mesin pencari. Berikut cara menerapkannya:
- Sebetulnya settingan ini adalah settingan awal pada saat sobat membuat blog, tetapi jika sobat ingin menambahkannya juga tidak apa.
- Langkah pertama masuk ke akun Blogger anda.
- Pilih menu Setelan, pilih Preferensi penelusuran.
- Di kolom Perayap dan pengindeksan ada robot.txt khusus, kemudian pilih Edit, pilih Ya.
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: https://blodroi.blogspot.co.id/sitemap.xml
- Catatan :
- User-agent: Mediapartners-Google : Digunakan untuk penanda bahwa blog menggunakan Google AdSense
- Disallow: : Yang tidak di perbolehkan
- User-agent: * : Semua robot mesin pencari.
- Disallow: /search : Tidak mengijnkan URL setelah /search
- Allow: / : Yang di ijinkan untuk di rayapi. Tanda / adalah nama blog.
- Sitemap: https://blodroi.blogspot.co.id/sitemap.xml :Sitemap/peta situs blog sobat, silahkan ganti URL nya dengan URL blog anda.
- Setelah selesai, pilih Simpan perubahan.
Cara Setting Tag Tajuk Robot Khusus:
Untuk mengaktifkan tag tajur robot khusus silahkan klik Setelah > Preferensi Penelusuran > Tag tajuk robot khusus. Kemudian lakukan settingan seperti pada gambar di bawah ini :
Settingan di atas bertujuan untuk membolehkan mesin pencari merayapi halaman beranda, default untuk pos dan laman (semua isi blog), namun tidak membolehkan mesin pencari untuk mengindeks laman arsip dan penelusuran (model pencarian yang terjadi di dalam blog)
Demikian informasi tentang Cara Mengaktifkan Robot.txt Default di Blogspot. Maaf jika ada kekurangan, silahkan tambahkan beberapa kekurangan pada artikel di kolom komentar. Saya harap informasi ini bermanfaat.
0 Comments