Cara Mengatasi peringatan Google Search Console (Diindeks Meski Diblokir Oleh Robots.txt ) 

Cara Mengatasi peringatan Google Search Console (Diindeks Meski Diblokir Oleh Robots.txt )



Bagi sobat yang mengalami hal seperti saya Diindeks Meski Diblokir Oleh Robots.txt. Doptutorial sudah menemukan caranya. Pada Google Search Console versi terbaru, memang baru baru ini muncul masalah warning diindeks, Meski Diblokir Oleh Robots.txt bagi para platform Blogger.

Pada peringatan URL yang diindeks meski di blokir oleh robot.txt antara lain pada halaman Search, yaitu halaman Search Label dan untuk halaman navigasi postingan lama. Seperti yang ditunjukan pada peringatan diindeks, meski diblokir oleh robots.txt. dikarenakan pada dasarnya blogger menggunakan robots.txt seperti di bawah ini.

User-agent: Mediapartners-Google 

Disallow: User-agent: * 
Disallow: /search 
Allow: / 

Sitemap: https://www.domain_anda.com/sitemap.xml

Pada setelan robots.txt standar di atas menyimpulkan bahwa semua halaman Search tidak diizinkan untuk dicrawl bot.tapi karena halaman-halaman search tersebut ditautkan di blog contohnya pada breadcrumb, menu, atau widget label dan pada navigasi next prev,jadi untuk halaman-halaman tersebut tetap dirayapi bot.

Untuk memecahkan masalah tersebut, sebaiknya halaman-halaman tersebut harus diperbolehkan untuk dirayapi bot dan ditampilkan di hasil pencarian. Caranya sebagai berikut.
  1. Masuk ke BLOGGER
  2. Pilih SETELAN
  3. Kemudian PREFERENSI PENELUSURAN
  4. ROBOTS TXT KHUSUS pilih EDIT 
Ganti dan aktifkan fungsi robot.txt dengan format di bawah ini

User-agent: * 
Disallow: 

Sitemap: https://www.domain_anda.com/sitemap.xml 
Sitemap: https://www.domain_anda.com/atom.xml?redirect=false&start-index=1&max-results=500 
Sitemap: https://www.domain_anda.com/feeds/posts/default 
Sitemap: https://www.domain_anda.com/sitemap-pages.xml

https://www.domain_anda.com  Ganti dengan domain anda.
Tambahkan kode baru jika postingan kamu lebih dari 500 atau 1500 contoh seperti ini

User-agent: *
Disallow:

Sitemap: https://www.domain_anda.com/sitemap.xml
Sitemap: https://www.domain_anda.com/atom.xml?redirect=false&start-index=1&max-results=500
Sitemap: https://www.domain_anda.com/atom.xml?redirect=false&start-index=501&max-results=500
Sitemap: https://www.domain_anda.com/atom.xml?redirect=false&start-index=1001&max-results=500
Sitemap: https://www.domain_anda.com/atom.xml?redirect=false&start-index=1501&max-results=500
Sitemap: https://www.domain_anda.com/feeds/posts/default
Sitemap: https://www.domain_anda.com/sitemap-pages.xml

Jika kamu sudah mengubahnya kemudian klik simpan perubahan.

Jika langkah di atas sudah di terapkan kemudian langkah berikutnya kita masukan kode di bawah ini dan tambahkan di bawah kode <head>. caranya masuk TEMA > EDIT HTML > cari kode <head>

<b:if cond='data:view.isArchive'>
<meta content='noindex,noarchive' name='robots'/>
</b:if>
<b:if cond='data:blog.searchQuery'>
<meta content='noindex,noarchive' name='robots'/>
</b:if>
<b:if cond='data:blog.searchLabel'>
<meta content='noindex,noarchive' name='robots'/>
</b:if>

Kemudian tinggal simpan tema. Untuk Submit robit.txt yang baru kamu buat, bisa masuk sini Robot Testing Tools pilih blog kamu.



Kemudian isi kolom yang di sediakan dengan robot.txt yang tadi di buat kemudian klik KIRIM.

No comments for "Cara Mengatasi peringatan Google Search Console (Diindeks Meski Diblokir Oleh Robots.txt ) "

close
 
Matikan AdBlock

Agar blog doptutorial tetap berjalan, matikan AdBlock atau masukkan blog ini ke dalam whitelist.
Terima kasih.