- Mengenai pengertian, fungsi dan sebagainya perihal robots.txt silahkan kunjungi atau klik tautan berikut: Bantuan Search Console.
Untuk mengetahui apakah ada URL dalam blog Anda yang cekal oleh robots.txt maka Anda harus berkunjung ke webmaster tools. Gambar di bawah ini ada 1 URL yang di cekal oleh robots.txt:
Cara cepat untuk melihat blog Anda ada URL yang dicekal robots.txt di webmaster tools, silahkan copy link berikut ke tab baru:
Jika tidak ada URL yang di cekal robots.txt maka tidak perlu ada perbaikan, namun jikalau ada URL yang dicekal robots.txt maka langkah selanjutnya yang Anda lakukan ialah segera memperbaikinya. Mengapa segera? alasannya ialah dampak dari URL yang di cekal di situs Anda sangat besar lengan berkuasa terhadap trafik, trafik akan mengalami penurunan secara drastis. Berikut 5 step cara mengatasinya:
Pertama, silahkan login ke dashboard blogger Anda.
Kedua, klik Settings - Search preferences - Custom robots.txt kemudian klik edit dan pilih yes. Lihat gambar:
Ketiga, pada menu edit silahkan masukkan robot.txt berikut lalu save:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow:
Allow: /
Sitemap: http://www.nama-blog.com/feeds/posts/default?orderby=updated
**Note: Ganti yang berwarna merah dengan alamat blog Anda.
Keempat, klik pada custom robots header tags dan pilih edit pilih yes. Lihat gambar:
***Note: Centang dan pastikan sesuai gambar, kemudian save.
Kelima, akibat dan selebihnya Anda bersabar saja dan tetap ibarat rutinitas biasanya yaitu menulis artikel. Dalam beberapa hari URL yang di cekal robots.txt akan segera hilang dengan sendirinya.
Itulah penjelasan singkat dari saya perihal "Cara Cepat Mengatasi URL yang Dicekal Robots.txt". Semoga bermanfaat dan dapat membantu Anda.
 |
| source www.republika.co.id |
 |
| 1 URL dicekal robots.txt |
https://www.google.com/webmasters/tools/index-status?hl=in&siteUrl=http://www.nama-blog.com/&is-view=a&is-indx=true&is-rbt=true*Note: Ganti yang berwarna merah dengan alamat blog Anda dan pastikan Anda sudah login sebelum menuju link nya.
Jika tidak ada URL yang di cekal robots.txt maka tidak perlu ada perbaikan, namun jikalau ada URL yang dicekal robots.txt maka langkah selanjutnya yang Anda lakukan ialah segera memperbaikinya. Mengapa segera? alasannya ialah dampak dari URL yang di cekal di situs Anda sangat besar lengan berkuasa terhadap trafik, trafik akan mengalami penurunan secara drastis. Berikut 5 step cara mengatasinya:
Pertama, silahkan login ke dashboard blogger Anda.
Kedua, klik Settings - Search preferences - Custom robots.txt kemudian klik edit dan pilih yes. Lihat gambar:
 |
| Custom Robots.txt |
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow:
Allow: /
Sitemap: http://www.nama-blog.com/feeds/posts/default?orderby=updated
**Note: Ganti yang berwarna merah dengan alamat blog Anda.
Keempat, klik pada custom robots header tags dan pilih edit pilih yes. Lihat gambar:
 |
| Custom Robots Header Tags |
Kelima, akibat dan selebihnya Anda bersabar saja dan tetap ibarat rutinitas biasanya yaitu menulis artikel. Dalam beberapa hari URL yang di cekal robots.txt akan segera hilang dengan sendirinya.
Itulah penjelasan singkat dari saya perihal "Cara Cepat Mengatasi URL yang Dicekal Robots.txt". Semoga bermanfaat dan dapat membantu Anda.
