Cara Simple Setting Robot.txt di Blogger Dengan Mudah
Robot.txt dan Tag Tajuk Robot dengan diaktifkan dua fungsi ini blog sobat lebih SEO Friendly dan mudah untuk dirayapi oleh mesin pencarian. dengan mengaktifkan robot.txt ini sobat bisa mengatur mana yang mau dirayapi oleh mesin pencarian atau tidak dirayapi oleh mesin pencarian
Cara Simple Setting Robot.txt di Blogger Dengan Mudah - Robot.txt dan Tag Tajuk Robot dengan diaktifkan dua fungsi ini blog sobat lebih SEO Friendly dan mudah untuk dirayapi oleh mesin pencarian. dengan mengaktifkan robot.txt ini sobat bisa mengatur mana yang mau dirayapi oleh mesin pencarian atau tidak dirayapi oleh mesin pencarian
Robot.txt merupakan akar dari situs yang menunjukan bagian dalam situs itu sendiri, sudah saya singgung diatas maka dari itu sobat bisa mengatur mana yang mau dirayapi oleh mesin pencarian dengan mengikuti cara dibawah ini.
Baca Juga : Cara Simple Mengaktifkan Ads.txt di Blogger
Baca Juga : Cara Simple Mengaktifkan Ads.txt di Blogger
Cara Simple Setting Robot.txt di Blogger
Pertama kali sobat buat blog di blogger pasti sudah mempunyai robot.txt bisa dicek di https://www.situs-sobat.com/robot.txt itu namanya settingan robot.txt default dari blogger dan biasanya lebih aman tapi belum tentu efektif buat sobat ya. Contoh kode default Blogger
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: https://blog-anda.blogspot.com/sitemap.xml
Kode robot.txt default blogger diatas mempunyai tujuan yaitu tidak akan merayapi seperti label contohnya seperti https://www.triksimple.com/search/label/Blogger karena label itu tidak menunjukan sebuah artikel dan mengijinkan sepenuhnya untuk merayapi Sitemap contohnya https://www.triksimple.com/sitemap.xml.
Kode diatas juga bisa dimodifikasi atau di custom untuk contohnya seperti dibawah ini
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /p/about.html
Disallow: /p/contact.html
Allow: /
Sitemap: https://blog-anda.blogspot.com/sitemap.xml
Kode diatas bertujuan tidak mengijinkan merayapi pada halaman about dan contact pada halaman statis, jika sobat mengganti atau menambahi bisa diedit sesuai selera sobat sendiri, tapi saya sarankan pakai robot.txt default dari blogger karena lebih aman pastinya
Penerapannya Robot.txt
Pertama masuk terlebih dahulu ke Blogger > Setelan > Preferensi Penelusuran lihat pada bagian robot.txt, jika blog sobat belum diaktifkan sekarang juga diaktifkan sobat.
Jika sudah klik Simpan Perubahan
Tidak hanya robot.txt yang harus diaktifkan Tag Tajuk Robot Khusus juga harus diaktifkan sobat,
Penerapan Tag Tajuk Robot Khusus
Pertama masuk terlebih dahulu ke Blogger > Setelan > Preferensi Penelusuran lihat pada bahian Tag Tajuk Robot Khusus tepat dibawah robot.txt khusus, jika belum diaktifkan sekarang juga diaktifkan sobat.
Tag Tajuk Robot Khusus diatas juga saya terapkan pada blog saya ini sobat, jika sudah klik Simpan Perubahan
Settingan diatas mempunyai tujuan yaitu merayapi semua isi yang ada diberanda (semua isi blog) dan tidak memperbolehkan merayapi arsip dan penelusuran (penulusuran yang terjadi didalam blog)
Oke sekian yang bisa saya jelaskan tentang Cara Simple Setting Robot.txt di Blogger Dengan Mudah Terima Kasih yang sudah berkunjung semoga bermanfaat bagi kalian semua.