cara mengisi robots.txt dan tag tajuk robot Khusus

Cara mengisi pengaturan pada Robot.txt dan Tag Tajuk Robot Khusus  dimaksudkan agar postingan dapat dengan mudah dirayapi/terindek oleh mesin pencari. Dengan menerapkan hal ini, maka blog kita akan lebih SEO friendly, dan pada kali ini saya akan berbagi solusinya agar penerapan robot.txt tidak menjadi lebih aman untuk kelangsungan blog anda.

1. Gunakan Robots.txt Default Saja

Settingan robots.txt default bawaan blogger inilah yang paling aman, tapi bukan berarti tidak efektif. kamu tidak perlu mengaktifkan settingan robots.txt di blog anda, karena untuk robots.txt default ini sudah aktif sejak kamu pertama kali membuat blog tersebut. Cek dengan ini http://blog-anda.blogspot.com/robots.txt. Berikut robots.txt default dari blogger.

• caranya buka Blog
• setelan
• preferensi penelusuran
• lalu EDIT robots.txt khusus dan Paste code dibawah ini
• User-agent: Mediapartners-Google
  Disallow: 
  
  User-agent: *
  Disallow: /search
  Allow: /
  
  Sitemap: http://fullfmg.blogspot.com/sitemap.xml
• Lebih tepatnya Liat SCREENSHOT

Keterangan:
User-agent: Mediapartners-Google {Penanda bahwa blog menggunakan AdSense}
Disallow: {Yang tidak dibolehkan tidak ada}
User-agent: * {Semua robot mesin pencari}
Disallow: /search {Tidak mengijinkan url setelah /search seperti ..../search/label dan ... search/search?updated...}
Allow: / {Yang diijinkan untuk dirayapi. Tanda (/) adalah nama blog.}
Sitemap: http://blog-anda.blogspot.com/sitemap.xml {Sitemap/peta situs blog.}

Cara mengisi Tag Tajuk Robot Khusus

Untuk mengaktifkan tag tajur robot khusus silahkan klik 

• Setelah 
• Preferensi Penelusuran 
•  Tag tajuk robot khusus. 
• Kemudian lisi seperti SCREENSHOT
  

Settingan di atas bertujuan untuk membolehkan mesin pencari merayapi halaman beranda, default untuk pos dan laman (semua isi blog), namun tidak membolehkan mesin pencari untuk mengindeks laman arsip dan penelusuran (model pencarian yang terjadi di dalam blog)

Sekarang kamu sudah selesai melakukan pengaturan blogspot antar muka yang seo friendly. Demikian cara mengisi robots.txt dan tag tajuk robot Khusus. Semoga artikel ini bermanfaat bagi kita semua,  Selamat mencoba dan semoga berhasil.