Cara Mudah Setting Robot Txt di Dashboard Blogger 2021
Pada dasarnya robot txt tidak hanya untuk memberi tahu crawler mesin telusur untuk tidak merayapi suatu halaman blog atau website, dan bukan untuk menyembunyikan halaman dari crawler mesin telusur. Intinya robot txt dapat memberitahu crawler mesin telusur halaman mana saja yang dapat di rayapi dan yang tidak dapat di rayapi.
Fungsi Robot txt yaitu untuk mengelola kunjungan atau trafik crawler mesin telusur pada blog kamu, dan pada kesempatan kali ini kita akan paparkan bagaimana cara setting robot txt pada dashboard Blogger baru 2021. Langsung saja silahkan simak penjelasan dibawah ini
1. Silahkan masuk ke dashboard blogger dan pilih setting/Setelan kemudian scroll ke bagian Crawler dan Pengindeksan
2. Aktifkan Robot Txt Kostum dengan cara menggeser ke kanan seperti pada gambar dibawah ini
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: https://www.papakeren.com/sitemap.xml
Kemudian pilih simpan
4. Kemudian Aktifkan Tag Header Robot Kustom
5. Pada tag halaman beranda aktifkan pilih All, kemudian simpan.
7. Pada Tag postingan dan halaman, silahkan pilih All. Kemudian pilih simpan.
Semoga dari pemaparan di atas bisa membantu teman teman Blogger dalam mencari solusi dalam Cara Setting Robot Txt di Dashboard Blogger 2021