Fungsi Robot.txt Pada Blogger - Arlina Design
Fungsi Robot.txt Pada Blogger - Robot.txt pada blogger memang sangat penting yang berguna untuk membantu perayapan dan pengindeks'an blog di SE (Search Engine).

Fungsi Robot.txt Pada Blogger

Secara sederhana Robot.txt ini adalah sebuah konvensi untuk memerintah robot mesin pencari atau web crawler atau juga mencegah semua halaman untuk di indeks.

Misalnya Anda tidak ingin halaman tertentu ditampilkan kepada mesin pencari! dan dengan Robot.txt inilah kita bisa memanfaatkan fungsi dari robot.txt agar dapat memblokir halaman tersebut.

Semua blogspot sudah ada fitur robot txt yang telah diberikan oleh blogger, secara default robot.txt seperti dibawah ini :

User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://www.arlinadzgn.com/sitemap.xml

Pastinya Anda akan bingung, apa sebenarnya arti-arti dari kode diatas, baiklah Saya akan menjelaskannya satu-persatu.

Keterangan
User-agent: Mediapartners-Google User agent milik Google menandakan bahwa blog ini adalah milik Google
Disallow Tidak diperbolehkan tidak ada
User-agent: * Semua Robot Search Engine
Disallow: /search Tidak diperbolehkan merayapi folder search dan seterusnya
Allow: / Mengizinkan semua halaman untuk dirayapi, kecuali yang sudah Disallow.
Sitemap: http://www.arlinadzgn.com/sitemap.xml Alamat feed blog/sitemap blog Anda

Mungkin itu saja sedikit penjelasan tentang fungsi dari Robot.txt semoga artikel ini bisa bermanfaat.

Fungsi Robot.txt Pada Blogger

Fungsi Robot.txt Pada Blogger - Robot.txt pada blogger memang sangat penting yang berguna untuk membantu perayapan dan pengindeks'an blog di SE (Search Engine).

Fungsi Robot.txt Pada Blogger

Secara sederhana Robot.txt ini adalah sebuah konvensi untuk memerintah robot mesin pencari atau web crawler atau juga mencegah semua halaman untuk di indeks.

Misalnya Anda tidak ingin halaman tertentu ditampilkan kepada mesin pencari! dan dengan Robot.txt inilah kita bisa memanfaatkan fungsi dari robot.txt agar dapat memblokir halaman tersebut.

Semua blogspot sudah ada fitur robot txt yang telah diberikan oleh blogger, secara default robot.txt seperti dibawah ini :

User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://www.arlinadzgn.com/sitemap.xml

Pastinya Anda akan bingung, apa sebenarnya arti-arti dari kode diatas, baiklah Saya akan menjelaskannya satu-persatu.

Keterangan
User-agent: Mediapartners-Google User agent milik Google menandakan bahwa blog ini adalah milik Google
Disallow Tidak diperbolehkan tidak ada
User-agent: * Semua Robot Search Engine
Disallow: /search Tidak diperbolehkan merayapi folder search dan seterusnya
Allow: / Mengizinkan semua halaman untuk dirayapi, kecuali yang sudah Disallow.
Sitemap: http://www.arlinadzgn.com/sitemap.xml Alamat feed blog/sitemap blog Anda

Mungkin itu saja sedikit penjelasan tentang fungsi dari Robot.txt semoga artikel ini bisa bermanfaat.
Portal Bola Online

Related Post

Portal Bola Online
Disqus Codes
  • To write a bold letter please use <strong></strong> or <b></b>
  • To write a italic letter please use <em></em> or <i></i>
  • To write a underline letter please use <u></u>
  • To write a strikethrought letter please use <strike></strike>
  • To write HTML code, please use <code></code> or <pre></pre> or <pre><code></code></pre>
    And use parse tool below to easy get the style.
Show Parser Box

strong em u strike
pre code pre code spoiler
embed

Subscribe Our Newsletter

Notifications

Disqus Logo