Cara Simple Setting Robot.txt di Blogger Dengan Mudah

Robot.txt dan Tag Tajuk Robot dengan diaktifkan dua fungsi ini blog sobat lebih SEO Friendly dan mudah untuk dirayapi oleh mesin pencarian. dengan mengaktifkan robot.txt ini sobat bisa mengatur mana yang mau dirayapi oleh mesin pencarian atau tidak dirayapi oleh mesin pencarian
Cara Simple Setting Robot.txt di Blogger Dengan Mudah

Cara Simple Setting Robot.txt di Blogger Dengan Mudah - Robot.txt dan Tag Tajuk Robot dengan diaktifkan dua fungsi ini blog sobat lebih SEO Friendly dan mudah untuk dirayapi oleh mesin pencarian. dengan mengaktifkan robot.txt ini sobat bisa mengatur mana yang mau dirayapi oleh mesin pencarian atau tidak dirayapi oleh mesin pencarian

Robot.txt merupakan akar dari situs yang menunjukan bagian dalam situs itu sendiri, sudah saya singgung diatas maka dari itu sobat bisa mengatur mana yang mau dirayapi oleh mesin pencarian dengan mengikuti cara dibawah ini.

Baca Juga : Cara Simple Mengaktifkan Ads.txt di Blogger

Cara Simple Setting Robot.txt di Blogger


Pertama kali sobat buat blog di blogger pasti sudah mempunyai robot.txt bisa dicek di https://www.situs-sobat.com/robot.txt itu namanya settingan robot.txt default dari blogger dan biasanya lebih aman tapi belum tentu efektif buat sobat ya. Contoh kode default Blogger

User-agent: Mediapartners-Google
Disallow: 

User-agent: *
Disallow: /search
Allow: /

Sitemap: https://blog-anda.blogspot.com/sitemap.xml

Kode robot.txt default blogger diatas mempunyai tujuan yaitu tidak akan merayapi seperti label contohnya seperti https://www.triksimple.com/search/label/Blogger karena label itu tidak menunjukan sebuah artikel dan mengijinkan sepenuhnya untuk merayapi Sitemap contohnya https://www.triksimple.com/sitemap.xml.

Kode diatas juga bisa dimodifikasi atau di custom untuk contohnya seperti dibawah ini

User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /p/about.html
Disallow: /p/contact.html
Allow: /
Sitemap: https://blog-anda.blogspot.com/sitemap.xml

Kode diatas bertujuan tidak mengijinkan merayapi pada halaman about dan contact pada halaman statis, jika sobat mengganti atau menambahi bisa diedit sesuai selera sobat sendiri, tapi saya sarankan pakai robot.txt default dari blogger karena lebih aman pastinya

Penerapannya Robot.txt


Pertama masuk terlebih dahulu ke Blogger > Setelan > Preferensi Penelusuran lihat pada bagian robot.txt, jika blog sobat belum diaktifkan sekarang juga diaktifkan sobat.

Jika sudah klik Simpan Perubahan

Tidak hanya robot.txt yang harus diaktifkan Tag Tajuk Robot Khusus juga harus diaktifkan sobat,

Penerapan Tag Tajuk Robot Khusus


Pertama masuk terlebih dahulu ke Blogger > Setelan > Preferensi Penelusuran lihat pada bahian Tag Tajuk Robot Khusus tepat dibawah robot.txt khusus, jika belum diaktifkan sekarang juga diaktifkan sobat.


Tag Tajuk Robot Khusus diatas juga saya terapkan pada blog saya ini sobat, jika sudah klik Simpan Perubahan

Settingan diatas mempunyai tujuan yaitu merayapi semua isi yang ada diberanda (semua isi blog) dan tidak memperbolehkan merayapi arsip dan penelusuran (penulusuran yang terjadi didalam blog) 

Oke sekian yang bisa saya jelaskan tentang Cara Simple Setting Robot.txt di Blogger Dengan Mudah Terima Kasih yang sudah berkunjung semoga bermanfaat bagi kalian semua.