Diindeks meski diblokir oleh robots.txt di Blogger, Apa Penyebabnya?

Postingan ini aku tulis untuk menjawab pertanyaan yang memadai kerap ditanyakan oleh pelanggan template blogger premium punya saya, yaitu perihal problem notifikasi Diindeks meski diblokir oleh robots.txt di Google Search Console.

Di sini aku tidak hanya mengatakan cara mengatasi masalah ini, tetapi juga dapat menjelaskan kenapa problem ini bisa terjadi. Harapannya sudah pasti supaya kawan baik lebih jelas tentang langkah kerja mesin pencari, lebih-lebih Google.

Langsung saja ke topik pembahasan.

Penyebab peringatan “Diindeks meski diblokir oleh robots.txt”
Mungkin banyak yang belum tahu, penyebab utama munculnya peringatan ini adalah gara-gara mesin pencari Google udah melewatkan perintah noindex memanfaatkan file robots.txt.

Sedangkan di blogger sampai waktu ini tetap memakai file robots.txt untuk menghindar halaman khusus sehingga tidak terindex di mesin pencari.

Halaman tersebut adalah halaman pencarian dan halaman label.

File robots.txt default blogger
Pada file robots.txt tersebut tercantum perintah :

Disallow: /search
Perintah berikut berfungsi untuk memberitahu mesin pencari sehingga tidak mengindex URL yang dimulai bersama dengan /search sehabis alamat blog.

Nah URL yang diawali bersama /search di blogger digunakan untuk halaman label dan halaman pencarian.

Contoh URL halaman label = https://linkmagz.sugeng.id/search/label/Produk

Contoh URL halaman pencarian = https://linkmagz.sugeng.id/search?q=mantabbbbb

Selain untuk halaman label dan pencarian, URL yang diawali bersama /search terhitung digunakan untuk menampilkan daftar postingan = https://linkmagz.sugeng.id/search?updated-max=2020-01-05T22:22:00-08:00&max-results=7

Terus bagaimana langkah mengatasinya?
Ada sebagian metode yang sanggup digunakan untuk menanggulangi persoalan ini.

1. Cara Pertama

Cara paling enteng adalah dengan menghapus perintah Disallow: /search di file robots.txt gunakan fitur custom robots.txt di blogger.

Dengan cara ini sanggup menghalau peringatan diindeks meski diblokir oleh robots.txt di google search console.

Tapi pengaruh buruknya halaman label dan pencarian masih selamanya dapat terindex di halaman pencarian.

Umumnya kami tidak dambakan halaman label dan pencarian terindex di halaman pencarian dikarenakan halaman selanjutnya termasuk halaman berkwalitas rendah.

2. Cara Kedua

Cara kedua adalah bersama dengan memakai tag header robot untuk memberitahu Google sehingga tidak mengindex halaman label dan pencarian.

Saat ini Google masih menolong tag header robot, dengan kata lain tag header robot tidak diabaikan layaknya file robots.txt.

Untuk menempatkan tag header robot ini sebenarnya/seharusnya mampu dijalankan secara otomatis bersama dengan mengfungsikan fitur “Tag tajuk robot khusus” di blogger.

Ketika pelanggan template blogger premium punya aku bertanya permasalahan ini, aku umumnya menyuruh untuk menyesuaikan setelan “Tag tajuk robot khusus.”

Tapi entah kenapa terakhir saya cek fitur “Tag tajuk robot khusus” di blogger udah tidak kembali bekerja sebagaimana mestinya. Sekarang telah tidak otomatis terlihat tag header robot noindex di halaman arsip, label, dan pencarian.

Karena langkah berikut udah tidak kembali bekerja, maka alternatifnya sanggup bersama dengan menempatkan tag meta robot segera di didalam template.

Caranya bagaimana, Mas?

Langsung saja salin kode di bawah ini :



Letakan kode selanjutnya tepat di bawah kode di dalam template.

Langkah selanjutnya, kawan dekat terhitung perlu mengapus perintah Disallow: /search pada file robots.txt.

Karena jika perintah Disallow: /search tidak dihapus, robot Google tidak sanggup membaca perintah dari tag meta robot yang udah dipasang sebelumnya.

Untuk cara menghapusnya silahkan masuk ke dashboard blogger > setelan > Crawler dan pengindeksan > Aktifkan fitur robots.txt kustom.

Klik terhadap robots.txt kostum, sesudah itu masukkan kode ini:

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Allow: /

Sitemap: https://linkmagz.sugeng.id/sitemap.xml
Note: tukar linkmagz.sugeng.id bersama alamat blog sobat.

Jangan lupa klik “Simpan”

Jika udah melakukan perubahan, jangan lupa klik tombol “Validasi Perbaikan” di dashboard Search Console. Setelah itu menanti sampai notifikasi “Diindeks meski diblokir oleh robots.txt” hilang.

Beberapa pesan notifikasi lain
Selain notifikasi “Diindeks meski diblokir oleh robots.txt”, nyaris dipastikan di Google Search Console termasuk muncul notifikasi-notifikasi lainnya.

Notifikasi lain tak hanya “Diindeks meski diblokir oleh robots.txt” umumnya bukan berupa sebagai peringatan. Artinya walaupun dibiarkan saja tidak begitu masalah. Malah justru lebih baik dibiarkan saja.

Berikut adalah beberapa notifikasi yang paling umum:

Anomali crawling
Notifikasi ini nampak umumnya sebab ada URL postingan yang awalannya sudah terindex di mesin pencari tetapi telah dihapus di blog.

Cara mengatasinya bagaimana, Mas?

Bisa dibiarkan saja atau kecuali kawan dekat risih sobat bisa mengalihkan URL postingan yang error ke tulisan lain bersama memanfaatkan fitur pengalihan spesifik di blogger.

Cara menggunakan fitur pengalihan khusus dapat dibaca di sini : Cara SEO Blogger.

Di-crawl – pas ini tidak diindeks
Notifikasi ini muncul umumnya gara-gara tersedia URL RSS feed yang tidak ditampilkan di hasil pencarian.

Cara mengatasinya bagaimana, Mas?

Cek daftar URL yang memperoleh notifikasi ini. Jika sebagain besar adalah URL RSS feed maka memadai biarkan saja.

URL RSS feed contohnya seperti ini:

https://viomagz.sugeng.id/feeds/posts/default

https://viomagz.sugeng.id/feeds/273523674801878748/comments/default

Halaman alternatif bersama dengan tag kanonis yang tepat
Notifikasi ini terlihat gara-gara adanya URL versi mobile dengan parameter ?m=1 di belakang URL.

Ketika teman akrab terhubung blog lewat perangkat mobile, di belakang URL akan otomatis tersedia tambahan paremeter ?m=1.

Di blogger otomatis menambahkan tag canonical (kanonis) terhadap halaman/postingan dengan parameter ?m=1.

Tag kanonis ini pada intinya berikan tahu mesin pencari bahwa URL bersama dengan tambahan ?m=1 dan yang tidak ada tambahannya adalah satu halaman/postingan yang sama, agar tidak memicu duplicate content.

Cara mengatasinya bagaimana, Mas?

Ini normal, lumayan biarkan saja.

Dan notifikasi lainnya
Masih banyak notifikasi-notifikasi lainnya yang nampak di Google Search Console. Namun notifkasi selanjutnya lebih dari satu besar sifatnya bukan peringatan.

Selama notifikasinya bukan sebuah peringatan atau warning, maka sobat tidak kudu benar-benar khawatir. Cukup dibiarkan saja apa adanya.

Mungkin hanya hingga di sini saja tulisan saya kali ini.

Jika ada pertanyaan silahkan disampikan lewat komentar.

Terima kasih.

If you adored this short article and you would such as to get additional details relating to Harga Nu Skin kindly see our web page.