rp0bNChIFHEQLNOWnNlTR7tYV3Qi69riOvEhpJHL
Cara Setting Robot.txt Blogger yang Aman dan SEO Friendly

Cara Setting Robot.txt Blogger yang Aman dan SEO Friendly

Setting Robot.txt Blogger - Sebelum kita membahas cara setting robot.txt blogspot yang aman supaya SEO friendly. Saya akan menjelaskan apa itu robot.txt ? Seberapa penting pengaturan robot.txt ini? Mari kita simak ulasan berikut.

setting robot txt yang aman

Apa Itu Robot.txt

Robot.txt atau biasa dikenal dengan robot protokol pengecualian adalah sebuah ketentuan pengguna blog atau website untuk mencegah mesin pencari agar tidak merayapi halaman tertentu yang tidak diizinkan untuk di index.

Fungsi Robot.txt

Sepeti yang dijelaskan tadi fungsi robot.txt yaitu untuk mengontrol halaman-halaman tertentu supaya tidak terindex oleh mesin pencari ( web crawler ) atau media sosial seperti Facebook, Twitter dan lainnya.

Pentingnya Robot.txt

Apabila kita mengganti pengaturan bawaan robot.txt, ini agar artikel yang kita tulis akan menjadi lebih SEO friendly. Karena dengan mengganti pengaturan default kita dapat mengatur halaman mana yang boleh diindex dan mana yang tidak diizinkan untuk terindex.

Cara Setting Robot.txt Blogger



1. Pertama Login ke akun blogger kamu
2. Pada Dasboard pilih menu Setting > Search Preference > Crawler and Indexing > Custom Robot.txt > Edit
3. Lalu Tempatkan kode berikut pada kotak yang tersedia


User-agent: *
Disallow: /search
Allow: /

Sitemap: https://blog-kamu.com/sitemap.xml

4. Terakhir pilih Save ( simpan )

Keterangan :
NamaKeterangan
User-agentSemua Nama Robot Pencari
DisallowHalaman yang tidak DIPERBOLEHKAN untuk dirayapi oleh User-agent
AllowHalaman yang DIPERBOLEHKAN untuk dirayapi oleh User-agent
SitemapPeta Situs Blog kamu. Ganti dengan nama domain kamu

Kita fokus terhadap kode Disallow : /search, artinya pembatasan / tidak di izinan untuk merayapi halaman seperti contoh https://link-blog.com/search/label/Blogger , karena URL tersebut tidak menuju ke satu halaman artikel penuh.

Setting Tag Tajuk Robot Khusus

Mengatur tag tajuk robot khusus, pilih menu Setting > Search Preference > Tag Tajuk


Menguji dan Mengecek Robot.txt

Untuk menguji dan mengecek settingan robot.txt tadi, kamu masuk ke situs Google Webmaster Tools kemudian pilih Crawler lalu pilih Robot.txt Tester .


Baca Juga
SHARE
Dimas Arief
Tidak normal tapi spesial. Blogger merangkap content writer yang secara ajaib tersesat di bidang keuangan. Semua tulisan di sini tersedia berkat bantuan kopi tanpa gula.

Related Posts

Subscribe to get free updates

Post a Comment

Iklan Tengah Post

Samied
Administrator

Tidak normal tapi spesial.Semua tulisan di sini tersedia berkat bantuan kopi tanpa gula.