Cara Setting Robots.txt Di Blogger Dan Mengintip Robots.txt Blog Orang Lain

Cara Setting Robots.txt Di Blogger Dan Mengintip Robots.txt Blog Orang Lain
Sebelum menjelaskan Cara Setting Robots.txt Di Blogger Dan Mengintip Robots.txt Blog Orang Lain, ada baiknya saya menjelaskan terlebih dahulu Apa itu Robots.txt? Robots.txt adalah sebuah file berformat text (.txt) yang wajib dimiliki setiap situs blog/website di internet yang didaftarkan pada mesin pencari seperti google, yahoo, dan bing. Jadi robots.txt sangat erat hubungannya dengan SEO. Robots.txt berfungsi untuk mengontrol dan mengatur halaman atau direktori mana yang boleh ditampilkan/diindex mesin pencari.

Mungkin itu saja sedikit gambaran tentang Robots.txt, lalu bagaimana cara mensettingnya di Blogger, langsung saja simak langkah berikut ini:

  1. Login terlebih dahulu di blogger.com
  2. Pilih blog >> Setelan >> Preferensi penelusuran >> Klik edit  robots.txt Khusus
  3. Setelah itu akan terbuka kotak kosong pada edit custom robots.txt tersebut. Berikut ini contoh robots.txt yang bisa kamu gunakan:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://www.contoh.com/sitemap.xml (Kata contoh ganti dengan alamat Blog Kamu)

Dan jika kamu ingin mengintip Robots.txt Blog Orang Lain terutama blog milik para mastah, kamu tingal menuliskan http://www.mengintip.com/robots.txt (Kata mengintip ganti dengan alamat blog yang akan diintip) 
Karna biasanya para mastah selalu memperhatikan hal seperti ini agar Blognya lebih SEO, jadi dengan kita mengintip dan menggunakannya untuk blog kita bisa menjadikan Blog kita juga semakin SEO.Oh ya, saran saya sih jangan kebanyakan mengintip, nanti mataya bintitan.
Ok Sob itu saja yang bisa saya jelaskan tentang Cara Setting Robots.txt Di Blogger Dan Mengintip Robots.txt Blog Orang Lain, Dan semoga Bermanfaat.
Share: Facebook Twitter Google+