Bagi kalian para blogger yang ingin Mengoptimasi robots.txt-nya, kini masterbama hadir untuk memberikan tutorial serta kode robots.txt-nya pada kalian.
Pengoptimalan robots.txt pada blog dapat mencegah terjadinya duplikat konten karena dengan melakukan pengoptimalan ini maka spider mesin pencari akan mengindex apa yang boleh diindex dan tidak mengindex yang tidak boleh diindex.
Cara memasangnya cukup mudah dan hanya memakan waktu sekitar 5-10 menit.
Cara :
1. Login ke blogger.com
2. Pilih menu "Setelan" lalu "Preferensi penelusuran"
3. Klik "Edit" pada robots.txt khusus
4. Aktifkan konten robots.txt khusus? Pilih "Ya"
5. Sekarang sobat masukkan kode dibawah ini.
User-agent: Mediapartners-Google6. Ganti yang berwarna orange dengan URL blog sobat.
Disallow:
User-agent: Googlebot
Disallow: /search
Disallow: /?m=1
Disallow: /?m=0
Disallow: /*?m=1
Disallow: /*?m=0
User-agent: *
Disallow: /search
Sitemap: http://masterbama.blogspot.com/feeds/posts/default?orderby=UPDATED
7. Simpan Perubahan
Sekian tutorialnya, semoga bermanfaat ^_^
Cara Mengatur Robots.txt Khusus Pada Blogspot
4/
5
Oleh
Niddul