Cara setting Robots.txt pada Blogspot

Aryan.ngrambe.net - Robots.txt berfungsi untuk mencegah web crawler bekerja sama dengan robot web lain untuk mengakses semua atau bagian dari sebuah website yang jika dilihat secara terbuka. Intinya sebuah file robots.txt pada sebuah situs web akan berfungsi sebagai permintaan agar robot tertentu mengabaikan file tertentu atau direktori ketika merangkak dalam sebuah situs.

Jika anda menggunakan Blog platform wordpress.org maka file robots.txt dapat di buat sendiri melalui file manager di cpanel, namun jika anda pengguna blogspot seperti saya maka ada langkah-langkah yang perlu sebelum mengaktifkan robots.txt (secara default tidak aktif)

Langkah-langkah setting Robots.txt untuk Blogger :

1. Login ke akun Blogger Anda
2. Klik Setelan > Preferensi Penelusuran
3. Pada Tab Perayapan dan Pengindeksan muncul menu robots.txt khusus pilih edit
Pengaturan Robot.txt Blogspot
4. Kemudian isi dengan perintah dibawah ini :
User-agent: Mediapartners-Google
Allow:/
User-agent: Googlebot
Disallow: /?m=1
Disallow: /?m=0
Disallow: /*?m=1
Disallow: /*?m=0
User-agent: *
Disallow: /search?*
User-agent: Twitterbot
Allow:/
User-agent: *
Disallow: /search
Disallow: /p/*
Disallow: /view/*
Allow: /
Sitemap: http://www.hanisah.com/feeds/post/default?orderby=UPDATED
5. Simpan

Nah, jika anda ingin mengaktifkan juga fitur Tag Header Robot Khusus maka dapat anda setting seperti berikut :
Pengaturan Tag Header Blogspot.
Untuk website dengan beberapa subdomain, subdomain masing-masing harus memiliki file robots.txt sendiri. Jika example.com memiliki file robots.txt tapi sub.example.com tidak, aturan yang akan berlaku untuk example.com tidak akan berlaku untuk a.example.com

Komentar

  1. Acellcom Ngawi20 Desember, 2012 18:21

    Wah bermanfaat nih mas,... kebetulan lagi cari info ini buat blogku..

    BalasHapus
  2. Unknown30 Januari, 2013 15:19

    Komentar ini telah dihapus oleh pengarang.

    BalasHapus
  3. Cemonggaul.Com08 Februari, 2013 20:20

    ok mastah... langsung dipraktekin :D
    kunjungi juga blog saya ya....
    kasih kritik dan saran :)

    BalasHapus
  4. Dian Ariyanto08 Februari, 2013 22:34

    Insyaalloh.. masih on mobile nih :)

    BalasHapus
  5. Dwi's Blog12 Februari, 2013 23:09

    Thanks gan infonya sangat membantu.....

    BalasHapus
  6. Shopi elektro13 Februari, 2013 17:33

    mksih atas info dan tutornya mas

    BalasHapus
  7. Pest Control14 Februari, 2013 11:38

    thanks for sharing. boleh lah buat nambah2 ilmu di blogger :D

    BalasHapus
  8. imong16 Februari, 2013 12:28

    selamat siang gan, tanya sedikit neh.. klo Blogspot.com ane dah ganti domain itu yang pake buat seting di robot.txt yang mana yah?

    tolong dibls, terima kasih

    BalasHapus
    Balasan
    1. Dian Ariyanto16 Februari, 2013 16:19

      Sitemap: http://www.hanisah.com/feeds/post/default?orderby=UPDATED

      rubah www.hanisah.com menjadi domainmu.blogspot.com atau domainmu.com / info/ net dll :)

      Hapus
  9. Tatang Garnita28 Maret, 2013 15:30

    Mantaaap !

    BalasHapus
  10. Lintas Line03 April, 2013 01:25

    thanks infonya, akhirnya saya bisa pasang dengan name sub domain blog saya.

    BalasHapus
  11. lintasline.me03 April, 2013 01:28

    thanks infonya, akhirnya saya bisa pasang dengan name sub domain blog saya. 

    BalasHapus
  12. Rlpurwakarta23 April, 2013 20:38

    nice gan... trims ya

    BalasHapus
  13. seo tool dan tips09 Juli, 2013 08:35

    sudah saya terapkan di blog saya gan.termasuk cara setting parameternya url googlenya juga.kalo ada waktu jangan lupa mampir ke blog saya gan http://optimasiseomywapblog.me/domain-murah-dari-namecheap.xhtml

    BalasHapus
  14. vertical blind19 Juli, 2013 14:32

    subdomainnya juga berpengaruh ya.

    BalasHapus
  15. Variasi Mobil23 Juli, 2013 10:39

    Apakah robot.txt ini masih berpengaruh dalam SEO?

    BalasHapus
  16. Belajar Ilmu Komputer06 Oktober, 2013 15:21

    Baru tahu ane, pake cara ini..
    tapi emang bener harus ada yang diblock..
    soalnya di webmaster terdeteksi duplicate meta and title tags..

    Terima kasih masbro.. langsung ane coba dah..

    BalasHapus
  17. rental mobil semarang05 September, 2015 23:48

    Terimakasih bapak sudah berkenan memberikan infonya, saya tunggu postingan selanjutnya yg lebih menarik

    BalasHapus
  18. Cari Kode Pos05 Desember, 2015 06:01

    Mungkin ini masalahku dgn blog kmrn....
    Thanks yaa...

    BalasHapus

Posting Komentar

Postingan populer dari blog ini

Merubah Tampilan Pada NOKIA N-GAGE QD & CLASIC

Gambar
Kali ini saya akan share software untuk merubah tampilan pada nokia n-gage.soalnya banyak yang nanya nanya nih sama saya dari temen temen jg yang lain nya…. nah selama ini kan ada opini kalo n-gage itu gag bisa di pasang thema untuk merubah tampilan? iya kan? untuk kali ini saya akan kasih aplikasi aplikasi untuk merubah tampilan pada hp nokia n-gage qd & n-gage
.

Cerita Pembayaran Adsense Pertamaku

Gambar
Aryan.ngrambe.net - Akhirnya pada saat ini saya bisa posting tentang pembayaran Google Adsense yang pertama kali di berikan kepada saya, sebenarnya pembayaran ini sudah sejak bulan 29 Oktober 2012 kemaren, namun dengan berbagai alasan baru dapat saya post hari ini :D itupun juga kalau bukan karena terinspirasi oleh tulisan sahabat saya 100 dolar pertama dari google adsense  tulisan ini tidak akan ada wkwkwk.. Gaji pertama dari Adsense Ketika itu saya sama sekali belum faham sama sekali tentang apa dan bagaimana Adsense bekerja, namun setelah berlarian kesana kemari mencari alamat  dan akhirnya bertemulah saya dengan seorang sahabat sebut saja Mas Vicky ( nama disamarkan ) yang menjelaskan secara jengkel kepada saya tentang adsense (saking seringnya saya bertanya jadi malu maluin ) kemudian saya berlari kearah lain hingga bertemulah dengan sebut saja Andriansyah ( nama disamarkan juga ), Nah tanpa saya sadari ternyata Andriansyah ini sudah setumpu...
.