22 October, 2021
Cara setting robot txt di blog terbaru 2023
Berikut ini ada beberapa cara setting robot txt yang benar supaya tidak terjadi masalah di google search console mungkin sobat pernah mengalami beberapa kendala saat submit artikel ke google search console seperti di index namun di blokir oleh robot txt seperti gambar di bawah ini.
Nah seperti gambar di bawah ini ada satu masalah yang harus kita perbaiki di settingan robot txt milik kita tetapi, sebelum memperbaiki nya silahkan sobat terlebih dahulu melihat alamat url yang manakah yang terkena masalah jika sudah ketemu maka mari kita perbaiki bersama sama.
Di index namun di blokir oleh robot txt
Jadi maksud dari di index namun di blokir robot txt itu adalah artikel yang baru saja kita publish ke google sudah terindex oleh google namun tidak di kirimkan ke peta situs di karena kan, kita pasang sebuah lebel di artikel yang baru saja kita publikasikan maka akan terkena masalah seperti itu jika kamu mengalami hal seperti gambar di atas jangan lah cemas karena bisa di perbaiki.
Cara memperbaiki robot txt di blog terbaru 2023
Silahkan sobat masuk ke pengaturan blog milik sobat jika sudah silahkan sobat cari crawler dan pengindexsan jika sudah silahkan sobat setting robot txt costum nya kamu bisa menggunakan dua jenis robot txt costum dan tag header robot costum silahkan sobat aktifkan salah satu atau ke dua nya bisa di aktifkan.
Setting robot txt costum
User-agent: *
Allow: /
Disallow: /search
Sitemap: https://www.situs blog kamu/sitemap.xml
Setting tag header robot costum
Tag halaman beranda klik all
Tag arsip dan halaman penelusuran klik semua kecuali all
Tag posting halaman klik all
Atau kamu lihat gambar seperti gambar di bawah ini
Untuk tag postingan halaman yang terakhir sama kan seperti tag halaman beranda klik simpan atau sobat bisa menggunakan salah satu robot txt yang sudah admin berikan, jika sudah kamu setting maka tunggu lah beberapa hari apakah masih ada masalah di google search consol nya jika masih ada kamu hapus url tersebut di goole search consol nya admin juga suka di hapus biarkan bot mengcrawler ulang blog kita .