Cara membuat robots.txt dan mensetingnya di blogger agar tambah seo

,

Gambar 0.1 Blogger logo.
Ketemu lagi brow.
Saya akan kasih tutorial cara setting robots.txt pada blogger (blogspot)
Semua plaform Blogger sudah memiliki robot.txt didalamnya.
Biasanya kalo baru buat blog , robots.txt masih nonaktif, dan untuk mengaktifkannya caranya begini:

1. Masuk ke blog blogger Anda.

2. Arahkan ke Settings >

3. Shearch Preferences >

4. Crawlers and Indexing >

5. Custom robots.txt >

6. Edit >

Dan anda langsung disuguhkan textarea yang sudah berisi kode.
Secara default robot.txt di blogspot seperti dibawah ini:

Contoh robots.txt default


User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://veriasha.blogspot.com/feeds/posts/default?orderby=UPDATED


Mari kita bahas satu persatu dari kode di atas.

User-agent: Mediapartners-Google
User agent milik google menandakan bahwa blog ini partner dari google. 

Disallow:
Yang tidak di perbolehkan tidak ada.

User-agent:*
Semua robot search engine/mesin pencari.

Disallow: /search
Tidak di perbolehkan merayapi folder seach dll, seperti search/label dan seterusnya. Itu berarti link memiliki kata kunci pencarian setelah nama domain akan diabaikan.

Allow: /:
Mengizinkan semua halaman untuk di rayapi.

sitemap: http://veriasha.blogspot.com/feeds/posts/default?orderby=UPDATED
Sitemap atau alamat feeds blog. Kode ini mengacu pada setimap blog.

Nah di atas adalah penjelasan tentang kode robot.txt. Jika Anda ingin memodifikasi robot txt, saya tekankan untuk hati hati.

Robots.txt untuk mencegah duplikat kontent


Nah kode di bawah ini adalah untuk mencegah duplikat konten yang terdapat di blog Anda, itu bisa disebabkan karena di akses dari mobile phone. Anda bisa mencegahnnya dengan setting robot.txt di blogger Anda dengan kode berikut:


User-agent: Mediapartners-Google
Disallow:
User-agent: Googlebot
Disallow: /search
Disallow: /?m=1
Disallow: /?m=0
Disallow: /*?m=1
Disallow: /*?m=0
User-agent: *
Disallow: /search
Sitemap: http://veriasha.blogspot.com/feeds/posts/default?orderby=UPDATED



Dan setelah semua selesai. Kita chek di google webmaster tool.
Anda bisa cek setingan robot,txt Anda dengan cara masuk di google webmasters tool lalu klik Crawl > Robot.txt Tester.

Tidak ada komentar:

Posting Komentar

Maaf, fitur koment hanya untuk pengguna akun goggle saja.
Dikarenakan untuk meminimalisir komentar spam.