Optimasi SEO dengan Robots.txt

Optimasi SEO dengan Robots.txt

Pada saat kita membuat blog di blogger, file robots.txt sudah ada secara otomatis, Fungsi file Robots.txt ini sendiri berfungsi sebagai pengatur atau sebagai pemberitahu jalan kepada mesin pencari seperti google di mana saat bot google merayapi kontent - kontent yang ada di blog.

File Robots.txt sebenarnya berguna bukan hanya untuk Mengoptimalkan SEO Blog, namun File robots.txt juga sangat berperan penting untuk mengontrol dan yang memberi Hak akses kepada mesin pencari dimana antara kontent yang ALLOW (di izinkan) dan DISALLOW (tidak di iZinkan) untuk proses pengindex-an.

Contoh file Robots.txt default

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: http://kamarsebelah.blogspot.com/feeds/posts/default?orderby=updated

Dari File Robots.txt di atas arti dari bari Disallow: /search adalah robots.txt melarang google bot untuk mengindex direktori /search atau label, keterangan singkatnya saya rasa begitu.


Cara Optimasi SEO dengan Robots.txt
Dari berbagai sumber yang saya cari tentang bagaimana mengoptimalkan SEO Blog dengan Robots.txt ini, banyak pula variasi pendapat yang berbeda dan membuat saya sedikit bingung,
tapi saya tidak mau bingung - bingung,
berikut saya kasih Robots.txt kamar Sebelah

User-agent: Mediapartners-Google
Disallow: 

User-agent: *
Disallow: /search
Allow: /

Sitemap: http://kamarsebelah.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500

ya, sebenarnya hanya perlu mengedit sitemap untuk blog saja,

Atau sobat bisa juga memakai File Robots.txt seperti ini

User-agent: Mediapartners-Google
Disallow: 

User-agent: *
Disallow: /search
Allow: /

Sitemap: http://kamarsebelah.blogspot.com/sitemap.xml

Untuk perbandingan Sitemap Blog bisa di lihat di sitemap blog yang sudah di sumbit pada Google Webmaster Tools,

 Silahkan di pilih sendiri mana sitemap yang akan di pake pada file Robots.txt,

Mengedit file Robots.txt di Blogger
Silahkan Login ke Blogger, pada menu Setting dan Search Preferences dan pilih menu Custom robots.txt, isikan file Robots.txt sobat dan jangan lupa save,

Mungkin sekian dulu tutorial Cara Optimasi SEO dengan Robots.txt mudah - mudahan berguna bagi kita semua, aminn.

Terima Kasih