Robot.txt adalah sebuah file text (.txt) di dalam sebuah halaman web yang berisi perintah-perintah halaman mana yang boleh di index dan mana yang tidak boleh diindex oleh spider mesin pencari. Robot.txt juga bisa dipakai untuk memaksimalkan lagi SEO pada Blog.
Robots.txt bersisi perintah agar spider mesin pencari tidak mengindex halaman versi seluler yang dalam keadaan default halaman versi seluler sering ikut terindex mesin pencari dan menyebabkan duplikat konten.
Untuk memasangnya pada blog kalian bisa simak tutorial dibawah ini
Tutorial
Pertama-tama pergi ke blogger.com
Pilih blog yang mau kalian pasang robot.txt
Klik "Setelan > Preferensi Penelusuran > Robot.txt khusus ---- Edit"
Masukan kode dibawah ini kekolom yang tersedia
User-agent: Mediapartners-Google*NB: ganti url Juankair Webster, dengan URL blog kalian
Disallow:
User-agent: Googlebot
Disallow: /search
Disallow: /?m=1
Disallow: /?m=0
Disallow: /*?m=1
Disallow: /*?m=0
User-agent: *
Disallow: /search
Sitemap: http://www.juankairwebster.blogspot.com/feeds/posts/default?orderby=UPDATED
Jika sudah klik "Simpan Perubahan"
Nah selesai deh, jika ada pertanyaan seputar Cara Mengatur Robot.txt Di Blog bisa tanyakan dikolom komentar...
Silahkan Gunakan Facebook Comment, Jika Anda Tidak Memiliki Blog
11 Comments
robot.txt emang sangat bermanfaat bagi blog kita
ReplyDeleteiya gan, bisa memaksimalkan seo blog juga :D
Deletewahh ane jadi tau apa itu robot,txt thanks infonya gan :D
ReplyDeletesama-sama :)
DeleteBisa Diocoba Nih :D
ReplyDeleteMakasih Sudah Share :D
sama-sama :D
DeleteFungsi robot.txt tuh apa gan?
ReplyDeletemengoptimalkan SEO pada blog gan ^_^
Deletememang gan, kurang afdol kayaknya kalau belum nerapin robot.txt di blog kita :D
ReplyDeleteini bagus gak gan, takutnya ke block atau tidak ditemukan
ReplyDeleteBagus gan, engga bakal ke block kok, buktinya blog saya engga keblock di SERP
Delete