Cara Memasang Robots.txt

   Jika sebelumnya Susuw Crots membagikan Cara Menghindari Pencurian Isi Semua Blog maka kali ini Susuw Crots akan membagikan Cara memasang robots.txt di blog, tapi sebelum sobat memasang dulu ada baiknya sobat mengerti dulu fungsi dan kegunaan robots.txt / fungsi dari perintah robots.txt di bawah ini :






Berikut Funsi dari perintah robots.txt

User-agent: Mediapartners-Google
Robot pengindex Mediapartners-Google (google adsense) dibolehkan untuk mengindex.

Disallow: 
Tidak ada larangan untuk merambani (karena tidak terdapat / dibelakangnya)
Dalam perintah ini untuk mempermudah google adsene dalam menyesuaikan penayangan iklan dengan konten situs anda.

User-agent: *
Tanda bintang berarti "seluruh robot peng-index" dibolehkan untuk mengindex.

Disallow: 
Tidak ada larangan untuk merambani (karena tidak terdapat / dibelakangnya)

Jika ingin melarang perambanan di semua halaman, tambahi / dibelakangnya
Disallow: /

Bila ingin halaman tertentu saja yang dilarang untuk dirambani tambahkan nama halaman tersebut setelah /  misal:
Disallow: /search
Berarti melarang untuk merambani halaman search

Allow: /
Memperbolehkan untuk merambani semua halaman (kebalikan dari Disallow)

Sitemap:
Alamat sitemap anda.
Membantu mesin pencari untuk mempermudah dan mempercepat melakukan perambanan di web kita.

setelah sobat mengetahui Funsi dari perintah robots.txt  , sobat bisa memasang robots.txt dengan cara seperti di bawah ini 

• Masuk ke Setelan
• Pilih Preferensi Penelusuran 

• maka akan muncul seperti gambar di bawah ini

•  Masukan kode di bawah ini

Disallow: 
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://www.namablog.blogspot.com/feeds/posts/default?orderby=updated

• Klik Simpan Perubahan
• Selesai Robots.txt sobat sudah terpasang

Tweet

Subscribe to receive free email updates: