Cara memasang dan setting robot txt itu mudah cukup dengan beberapa langkah saja loh sobat!
robot.txt
The Robot Exclusion Standard, atau sering disebut sebagai Robots Exclusion Protocol atau robots.txt protokol adalah sebuah konvensi yang berguna untuk mencegah web crawler bekerja sama dengan web crawler lain untuk melihat semua bagian website
Atau jika masih binggung ini pengertian ke-dua nya
Robot.txt berguna untuk membatasi akses mesin pencari yang sedang menjelajahi blog/website,sebelum menjelajahi blog/website mesin pencari akan melihat apakah ada robot.txt atau tidak,karena di dalam robot.txt terdapat perintah untuk mencegah masuk ke halaman tertentu
Dan langsung kita masuk ke-cara memasang nya
Cara memasang robot.txt :
- Masuk ke blogger
- Ambil setelan
- Ambil preferensi penelusuran
- Ambil seperti digambar ini
- Cara memasang dan setting robot txt
- Kemudian klik aktifkan kemudian isi kode berikut di dalam kotak yang disediakan
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://blog-kalian.blogspot.com/feeds/posts/default?orderby=UPDATED
Maka akan tampak seperti ini :
Keterangan masing-masing kode seperti berikut
User-agent: Mediapartners-Google
Disallow: adalah kode yang berguna untuk menandakan bahwa blog ini adalah partner google yang tak lain gunanya adalah untuk mempermudah iklan google adsense menampilkan iklan yang revelan (sesuai) serta memberi tahu bahwa blog kita bisa diakses oleh mesin pencari
User-agent: *
Disallow: /search
Allow: / Berguna untuk melarang mesin pencari mengakses page label karena jika dibiarkan maka akan terjadi duplikat konten yang sangat tidak disukai google
Sitemap: http://blog-kalian.blogspot.com/feeds/posts/default?orderby=UPDATED
Itu adalah sitemap yang mempermudah peng-indexan.
Cara men-setting Robot Header Tags :
- Masih di menu preferensi penelusuran
- Ambil Custom robots header tags yang terletak paling bawah dan pilih ya
- Akan ada kotak setting,dan setting seperti gambar berikut
- Simpan
Jadi itulah Cara memasang dan setting robot txt yang termasuk optimasi SEO yang penting ketika seorang Pemula belajar seo, semoga bermanfaat!
Semoga artikel Cara Settings Robot.txt Template agar SEO Friendly bermanfaat bagi Anda.
nice post..
BalasHapusmantab tutornya