Cara mengatur Robot.txt khusus pada Blogger/Blogspot

Cara setting Robots.txt khusus di Blogger/Blogspot


Cara mengatur Robot.txt khusus pada Blogger/Blogspot
Setting Robot.txt


Apa itu robots.txt??? adalah file berformat (txt) sebuah perintah bagi robot mesin pencari seperti Google, Yahoo, Bing untuk menelusuri atau merayapi mana yang boleh ditampilkan/diindex mesin pencari pada blog kita. Robot.txt berfungsi untuk mengatur dan mengontrol halaman mana yang boleh di tampilkan mesin pencari. Setiap blog mempunyai robots.txt yang di setting secara default robots.txt pada blog oleh penyedia layanan diatur sebagai berikut :

Robot.txt defaul diblogger

User agent: Mediapartners-Google
Disallow:
User­agent: *
Disallow:/search
Allow:/
Sitemap: http://namablog/feeds/posts/defaul?torderby=UPDATED

Apa arti dari kode­kode di atas

  • User­agent: Mediapartners-Google yaitu Bot Crawler/robot perayap Mediapartners­Google. Mediapartners­-Google adalah bot crawler untuk google adsense.
  • Disallow: yaitu yang tidak batasan halaman yang artinya boleh merayapi semua halaman blog  
  • User­agent: * yaitu berlaku untuk semua robot Search Engine / mesin pencari  
  • Disallow: /search yaitu tidak diperbolehkan merayapi atau menjelajah url yang memiliki awalan urlbloganda.com/search. penulisan kode default 
  • Disallow: /search, yaitu artinya perayapan untuk label seperti alamat http://namablog.com/search/label/Tutorial, nantinya tidak akan dirayapi oleh mesin pencari karena Label bukan URL yang real menuju halaman tertentu.
  • Allow: / yaitu mengizinkan semua halaman untuk dirayapi, kecuali yang tertulis pada disallow di atas. Tanda (/) kurang lebih artinya nama blog. Sitemap: http://namablog/feeds/posts/default?orderby=UPDATED sitemap atau alamat feed blog kita.   


Cara mencegah robot.txt merayapi pada halaman tertentu  

Mencegah robot google merayapi halaman tertentu di blog anda, teman­teman tidak ingin halaman tertentu diindex oleh mesin pencari. Untuk URL halaman pada blog anda misal : http://namabloganda.blogspot.com/p/about.html, Maka untuk robots.txt akan seperti kode dibawah ini: 


User­agent: Mediapartners-Google
Disallow:
User­agent: *
Disallow: /search
Disallow: /p/about.html
Allow:/
Sitemap: http://namablog/feeds/posts/default?orderby=UPDATED

Cara menambahkan atau editing robots.txt di blogger


  • Masuk ke "Setelan"
  • klik "Preferensi Penelusuran" 
  • Klik edit pada "Robots.txt"
  • klik "Ya"
  • Masukan "kode robots.txt yang diinginkan"
  • Klik "Simpan Perubahan"  


Catatan: Hati-hati dengan penggunaan robots.txt, apabila salah penulisan bisa jadi blog sobat diabaikan oleh mesin pencari.

Related Posts:

7 Responses to "Cara mengatur Robot.txt khusus pada Blogger/Blogspot"

  1. makasi mas infonya, kebetulan lg belajar gunain robot.txt

    ReplyDelete
    Replies
    1. Saya IBU SALMAH ingin berbagi cerita kepada anda semua bahwa saya yg dulunya cuma seorang TKW di ARAB SAUDI jadi pembantu rumah tangga yg gajinya tidak mencukupi keluarga di kampun,jadi TKW itu sangat menderita dan di suatu hari saya duduk2 buka internet dan tidak di sengaja saya melihat komentar orang tentan AKI SOLEH dan katanya bisa membantu orang untuk memberikan nomor yg betul betul tembus dan kebetulan juga saya sering pasan nomor di ARAB SAUDI,akhirnya saya coba untuk menhubungi AKI SOLEH dan ALHAMDULILLAH beliau mau membantu saya untuk memberikan nomor,dan nomor yg di berikan AKI SOLEH meman betul2 terbukti tembus dan saya sangat bersyukur berkat bantuan AKI SOLEH kini saya bisa pulang ke INDONESIA untuk buka usaha sendiri,,munkin saya tidak bisa membalas budi baik AKI SOLEH sekali lagi makasih yaa AKI dan bagi teman2 yg menjadi TKW atau TKI seperti saya,bila butuh bantuan hubungi saja AKI SOLEH DI 082-313-336-747- insya ALLAH beliau akan membantu anda.Ini benar benar kisah nyata dari saya seorang TKW trimah kasih banyak AKI atas bantuang nomor togel nya wassalam.


      KLIK DISINI BOCORAN TOGEL HARI INI






























      Saya IBU SALMAH ingin berbagi cerita kepada anda semua bahwa saya yg dulunya cuma seorang TKW di ARAB SAUDI jadi pembantu rumah tangga yg gajinya tidak mencukupi keluarga di kampun,jadi TKW itu sangat menderita dan di suatu hari saya duduk2 buka internet dan tidak di sengaja saya melihat komentar orang tentan AKI SOLEH dan katanya bisa membantu orang untuk memberikan nomor yg betul betul tembus dan kebetulan juga saya sering pasan nomor di ARAB SAUDI,akhirnya saya coba untuk menhubungi AKI SOLEH dan ALHAMDULILLAH beliau mau membantu saya untuk memberikan nomor,dan nomor yg diberikan AKI SOLEH meman betul2 terbukti tembus dan saya sangat bersyukur berkat bantuan AKI SOLEH kini saya bisa pulang ke INDONESIA untuk buka usaha sendiri,,munkin saya tidak bisa membalas budi baik AKI SOLEH sekali lagi makasih yaa AKI dan bagi teman2 yg menjadi TKW atau TKI seperti saya,bila butuh bantuan hubungi saja AKI SOLEH DI 082-313-336-747- insya ALLAH beliau akan membantu anda.Ini benar benar kisah nyata dari saya seorang TKW
      trimah kasih banyak AKI atas bantuang nomor togel nya wassalam.


      KLIK DISINI BOCORAN TOGEL HARI INI





















      Delete
  2. kalau robots.txt nya dibiarkan setingan default blogger gpp kan ?!

    ReplyDelete
  3. Nice Info (y) ahmdjazuli.blogspot.com

    ReplyDelete
  4. BEST RECOMMENDATION:

    PLAY AND WIN WITH; SAHABATQQ
    PLAY AND WIN WITH; LOTTO03
    PLAY AND WIN WITH; MEJAQQ
    PLAY AND WIN WITH; SAHABAT KARTU
    PLAY AND WIN WITH; SAHABAT DOMINO
    GET INFORMATION; POKERVQQ
    GET INFORMATION; WALTPOKER
    GET INFORMATION; SENANGPOKER
    GET INFORMATION; AREADOMINO
    GET INFORMATION; POKERMAS99
    GET INFORMATION; RANTAIQQ
    GET INFORMATION; POKERPELANGI
    GET INFORMATION; SARANG188
    GET INFORMATION; ONEBETQQ
    GET INFORMATION; RAKSASAPOKER
    GET INFORMATION; VIPBANDARQ
    GET INFORMATION; 6DEWA
    GET INFORMATION; DEWAPOKERQQ
    GET INFORMATION; SARANAPOKER
    GET INFORMATION; RAJADOMINO

    ReplyDelete

Silahkan tinggalkan komentarnya
Terimakasih

Sabilal fahri

populer

.

Comments system