Robot.txt adalah sebuah file text (.txt) di dalam sebuah halaman web yang berisi perintah-perintah halaman mana yang boleh di index dan mana yang tidak boleh diindex oleh spider mesin pencari. Robot.txt juga bisa dipakai untuk memaksimalkan lagi SEO pada Blog.
Robots.txt bersisi perintah agar spider mesin pencari tidak mengindex halaman versi seluler yang dalam keadaan default halaman versi seluler sering ikut terindex mesin pencari dan menyebabkan duplikat konten.
Untuk memasangnya pada blog kalian bisa simak tutorial dibawah ini
Tutorial
Pertama-tama pergi ke blogger.com
Pilih blog yang mau kalian pasang robot.txt
Klik "Setelan > Preferensi Penelusuran > Robot.txt khusus ---- Edit"
Masukan kode dibawah ini kekolom yang tersedia
User-agent: Mediapartners-Google*NB: ganti url Juankair Webster, dengan URL blog kalian
Disallow:
User-agent: Googlebot
Disallow: /search
Disallow: /?m=1
Disallow: /?m=0
Disallow: /*?m=1
Disallow: /*?m=0
User-agent: *
Disallow: /search
Sitemap: http://www.juankairwebster.blogspot.com/feeds/posts/default?orderby=UPDATED
Jika sudah klik "Simpan Perubahan"
Nah selesai deh, jika ada pertanyaan seputar Cara Mengatur Robot.txt Di Blog bisa tanyakan dikolom komentar...
Silahkan Gunakan Facebook Comment, Jika Anda Tidak Memiliki Blog
robot.txt emang sangat bermanfaat bagi blog kita
ReplyDeleteiya gan, bisa memaksimalkan seo blog juga :D
Deletewahh ane jadi tau apa itu robot,txt thanks infonya gan :D
ReplyDeletesama-sama :)
DeleteBisa Diocoba Nih :D
ReplyDeleteMakasih Sudah Share :D
sama-sama :D
DeleteFungsi robot.txt tuh apa gan?
ReplyDeletemengoptimalkan SEO pada blog gan ^_^
Deletecara ini juga sangat bagus di terapkan pada blog, agar robot mesin pencari memudahkan artikel2 kita terindex.
ReplyDeletebuktinya artikel ane belum 5 menit udah ke index, tapi di submit dulu :p
nice info gan ^_^
memang gan, kurang afdol kayaknya kalau belum nerapin robot.txt di blog kita :D
Deleteini bagus gak gan, takutnya ke block atau tidak ditemukan
ReplyDeleteBagus gan, engga bakal ke block kok, buktinya blog saya engga keblock di SERP
Delete