Cara Setting robot.txt Blogger untuk Optimasi Google News
 |
| Ilustrasi |
Halo Blogger, pada artikel ini saya akan menyampaikan pembahasan tentang cara setting robot.txt untuk optimasi google news.
Apa kaitan robot.txt dengan Google news?
Mengingat bahwa Google news mempunyai crawler atau bot yang berbeda dengan crawler pada umumnya, dan berdasarkan referensi yang saya baca bahwa settingan robot.txt pada blog tidak boleh membatasi perayapan google news bot pada direktori (a.k.a Label, jika platformnya blogger.com) maka kita perlu mengatur format file robot.txt kustom menjadi ramah untuk perayapnya.
Pada dasarnya settingan default robot.txt di blogger adalah sebagai berikut:
User-agent: Mediapartners-GoogleDisallow:User-agent: *Disallow: /searchAllow: /Sitemap: https://segalacaraterbaru.blogspot.com/sitemap.xml
Format di atas bisa mencegah Googlebot-News meng-crawl halaman label dan arsip di blogger.
Jadi, kita perlu sedikit memodifikasinya.
Format robot.txt yang ramah untuk Googlebot-News
Karena format default yang tercantum di atas bisa menghalangi perayapan pada label dan arsip, maka formatnya perlu diubah.
Ada beberapa format yang saya sarankan.
Format ke-1:
User-agent: Mediapartners-GoogleDisallow:User-agent: *Allow: /Sitemap: https://segalacaraterbaru.blogspot.com/sitemap.xml
Format ke-2:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search?q=*
Allow: /
Sitemap: https://segalacaraterbaru.blogspot.com/sitemap.xml
Format ke-3:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search?q=*
Allow: /
User-agent: Googlebot-News
Allow: /
Sitemap: https://segalacaraterbaru.blogspot.com/sitemap.xml
Anda bisa menggunakan salah satu dari 3 format di atas. Salin kemudian tempel (pasang) di settingan blogger.
Cara Memasang robot.txt untuk Google News di Blogger
Setelah Anda menyalin salah satu format di atas, silakan masuk ke blog Anda di Blogger.com.
Pilih "Setelan" --> Crawler dan Pengindeksan --> Aktifkan robot.txt kustom --> Tempel format robot.txt pada kolom tersedia --> Simpan.
Demikianlah cara setting robot.txt untuk optimasi google news, cara membuat memasang robot.txt kustom di Blogger.
Semoga informasi ini bermanfaat.
Post a Comment for "Cara Setting robot.txt Blogger untuk Optimasi Google News"