Bagaimana Cara Mengatasi Diindeks, Meski Diblokir Oleh Robots.txt Assalamualaikum warahmatullahi wabarakatuh Hallo sahabat blogger semuanya Pada kesempatan kali ini admin akan membahas tentang bagaimana cara mengatasi permasalahan website kita maupun blog kita pada Google Webmaster Salah satunya yaitu tentang memperbaiki dari masalah diindeks oleh Google atau oleh mesin pencari tetapi sebenarnya kita sudah memblokir halaman-halaman tersebut lewat robot.txt tetapi masalah tersebut muncul ketika kita membuka google webmaster tools atau permasalahan tersebut muncul ketika kita membuka email karena biasanya jika ada peringatan atau warning biasanya akan muncul pada email yang bersangkutan.
Salah satu contoh kasus jika dalam bahasa Indonesia peringatan ini bisa bertuliskan "Diindeks, Meski Diblokir Oleh Robots.txt" kemudian dalam bahasa Inggrisnya bisa bertuliskan "Indexed, though blocked by robots.txt" Jadi pada dasarnya kedua hal tersebut sama hanya berbeda bahasanya saja dimana contoh email yang kami dapatkan kira-kira seperti pada gambar dibawah ini.
Dan untuk contoh kasus seperti ini anda tidak perlu khawatir karena ada cara yang lebih sederhana dan simpel yang tidak akan membuat Anda bingung terutama bagi Anda yang punya website maupun blog yang menggunakan khusus blogger panduan ini sudah tepat dan cara Ini sudah saya terapkan di website lain Jadi mudah-mudahan jika anda mengalami masalah atau peringatan seperti ini setidaknya anda tidak panik dan tidak bingung Kemudian untuk peringatan-peringatan lainnya anda tidak usah panik misalnya tentang tag conditional seperti kanonik maupun hal-hal lainnya seperti redirect halaman yang bisa saya Tampilkan seperti pada gambar dibawah ini saya.
Jadi yang perlu saya perbaiki adalah warning yang ditampilkan dan untuk caranya langsung saja ikuti panduan di bawah ini harap ikuti arahannya mulai dari awal hingga akhir serta saya juga akan sedikit Berikan penjelasan tentang maksud dari kode-kode yang akan saya berikan tersebut.
1. Langkah yang pertama adalah silakan login ke blogger masing-masing kemudian langsung menuju "Setelan" lalu pilih bagian "preferensi penelusuran" kemudian aktifkan "Robots.txt khusus" kemudian silakan isi pengaturan tersebut seperti pada gambar dibawah ini.
User-agent: *
Allow: /
Sitemap: https://my.indoblog.me/sitemap.xml
my.indoblog.me silakan ganti dengan nama website maupun nama blog masing-masing untuk pengaturan sisanya siilahkan samakan dengan yang digambar terutama pada tag tajuk robot khusus harap dimatikan karena kita nanti akan memasang Meta tag secara langsung pada template yang kita miliki.
2. Untuk selanjutnya adalah silakan Anda masuk pada menu "tema" kemudian pilih "Edit HTML" kemudian silahkan anda cari <head> Kalau tidak ada kode tersebut mungkin sudah di konversi ke <head> kemudian silahkan simpan kode di bawah ini tepat di bawah kode <head> atau <head> untuk pemasangannya bisa Perhatikan gambar di bawah saja
<!-- Halaman Arsip -->
<b:if cond='data:blog.pageType == "archive"'>
<meta content='noindex,nofollow' name='robots'/>
</b:if>
<!-- Halaman Label -->
<b:if cond='data:blog.searchLabel'>
<meta content='noindex,nofollow' name='robots'/>
</b:if>
<!-- Halaman Search Query -->
<b:if cond='data:blog.searchQuery'>
<meta content='noindex,nofollow' name='robots'/>
</b:if>
<!-- Halaman Search Update -->
<b:if cond='data:blog.pageType == "index" and data:blog.url != data:blog.homepageUrl and !data:blog.searchLabel and !data:blog.searchQuery'>
<meta content='noindex,noarchive' name='robots'/>
</b:if>
<!-- Halaman Statis -->
<b:if cond='data:blog.pageType == "static_page"'>
<meta content='noindex,noarchive' name='robots'/>
</b:if>
<!-- Halaman Error -->
<b:if cond='data:blog.pageType == "error_page"'>
<meta content='noindex,noarchive' name='robots'/>
</b:if>
Kemudian jangan lupa simpan templatenya dan silahkan tunggu sekitar berapa hari Biasanya perubahan ini akan terlihat setelah 3 sampai 7 hari, berikut adalah penjelasan dari kode-kode di atas yang mungkin anda butuhkan untuk biar lebih dipahami.
1. Halaman Arsip
<!-- Halaman Arsip -->
<b:if cond='data:blog.pageType == "archive"'>
<meta content='noindex,nofollow' name='robots'/>
</b:if>
Contoh halaman arsip ini url nya kira-kira seperti berikut ini
https://my.indoblog.me/2020/07
2. Halaman Label
<!-- Halaman Label -->
<b:if cond='data:blog.searchLabel'>
<meta content='noindex,nofollow' name='robots'/>
</b:if>
Untuk halaman label url nya kira-kira seperti di bawah ini
https://my.indoblog.me/search/label/SEO
3. Halaman Pencarian Kueri
<!-- Halaman Search Query -->
<b:if cond='data:blog.searchQuery'>
<meta content='noindex,nofollow' name='robots'/>
</b:if>
Untuk halaman pencarian query contoh url-nya seperti dibawah ini
https://my.indoblog.me/search?q=kata+kunci
4. Halaman Pencarian Update
<!-- Halaman Search Update -->
<b:if cond='data:blog.pageType == "index" and data:blog.url != data:blog.homepageUrl and !data:blog.searchLabel and !data:blog.searchQuery'>
<meta content='noindex,noarchive' name='robots'/>
</b:if>
Untuk halaman pencarian update contoh url nya kira-kira seperti di bawah ini
https://my.indoblog.me/search?updated-max=2020-07-01T03:45:00%2B07:00&max-results=12
5. Halaman Statis
<!-- Halaman Statis -->
<b:if cond='data:blog.pageType == "static_page"'>
<meta content='noindex,noarchive' name='robots'/>
</b:if>
Untuk halaman statis contoh url nya kira-kira seperti berikut ini
https://my.indoblog.me/p/kontakl-kami.html
6. Halaman Error
<!-- Halaman Error -->
<b:if cond='data:blog.pageType == "error_page"'>
<meta content='noindex,noarchive' name='robots'/>
</b:if>
Dan untuk halaman error url nya kira-kira seperti di bawah ini
https://my.indoblog.me/2020/07/halaman-ini-error.html
Itulah beberapa penjelasan yang bisa kami sampaikan pada kesempatan kali ini semoga bisa bermanfaat untuk sahabat-sahabat blogger semuanya dan apabila ada yang ingin ditanyakan silahkan tanyakan pada kolom komentar yang sudah disediakan dan atas kunjungannya saya ucapkan terima kasih ih Sekian dulu apa yang biasa sampaikan mengenai Cara Mengatasi Diindeks, Meski Diblokir Oleh Robots.txt Pada Google Webmasters semoga bermanfaat dan terima kasih banyak.