Optimasi SEO dengan Robots.txt

Pada saat kita membuat blog di blogger, file robots.txt sudah ada secara otomatis, Fungsi file Robots.txt ini sendiri berfungsi sebagai pengatur atau sebagai pemberitahu jalan kepada mesin pencari seperti google di mana saat bot google merayapi kontent - kontent yang ada di blog.

File Robots.txt sebenarnya berguna bukan hanya untuk Mengoptimalkan SEO Blog, namun File robots.txt juga sangat berperan penting untuk mengontrol dan yang memberi Hak akses kepada mesin pencari dimana antara kontent yang ALLOW (di izinkan) dan DISALLOW (tidak di iZinkan) untuk proses pengindex-an.

Contoh file Robots.txt default
User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: http:// kamarsebelah.blogspot.com/feeds/posts/default?orderby=updated Dari File Robots.txt di atas arti dari bari Disallow: /search adalah robots.txt melarang google bot untuk mengindex direktori /search atau label,keterangan singkatnya saya rasa begitu.

Cara Optimasi SEO dengan Robots.txt
Dari berbagai sumber yang saya cari tentang bagaimana mengoptimalkan SEO Blog dengan Robots.txt ini, banyak pula variasi pendapat yang berbeda dan membuat saya sedikit bingung,
tapi saya tidak mau bingung - bingung,
berikut saya kasih Robots.txt kamar Sebelah
User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: http:// kamarsebelah.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500
ya, sebenarnya hanya perlu mengedit sitemap untuk blog saja,
Atau sobat bisa juga memakai File Robots.txt seperti ini
User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: http:// kamarsebelah.blogspot.com/sitemap.xml
Untuk perbandingan Sitemap Blog bisa di lihat di sitemap blog yang sudah di sumbit pada Google Webmaster Tools,


Silahkan di pilih sendiri mana sitemap yang akan di pake pada file Robots.txt,

Mengedit file Robots.txt di Blogger
Silahkan Login ke Blogger, pada menu Setting dan Search Preferences dan pilih menu Custom robots.txt, isikan file Robots.txt sobat dan jangan lupa save,


Mungkin sekian dulu tutorial Cara Optimasi SEO dengan Robots.txt mudah - mudahan berguna bagi kita semua, aminn.

Terima Kasih

 

Terima kasih sangat membantu artikelnya

 

saya sudah menghapus semua robot.txt, soalnya Yandex tidak support robot.txt alias tidak mau baca blog yang ada Robot.txt
hal itu wajar bagi saya karena pasar saya adalah Rusia

 

Wiiih mantaaf langsung praktek gan supaya tambah seo

 

Thanks tutorial robots.txt nya den

 

Ada efek negatifnya gak mas? takut entar malah salah jadi eror kayak google bilang

 

ada yab bilang robot text itu berbahaya jika salah den .. sebaiknya default saja..

 

Terima kasih kembali mas..

 

Semoga sukses gan bisnisnya

 

Ini dampak negatifnya agan - agan :

1. Tidak mobile friendly karena secara langsung robots.txt tersebut mencekal halaman pada tampilan mobile phone.
2. hilangnya meta deskripsi artikel di pencarian atau pada browser mobile phone karena bot juga mencekalnya.

 

Ini agan - agan efek negatifnya

1. Tidak mobile friendly karena secara langsung robots.txt tersebut mencekal halaman pada tampilan mobile phone.
2. hilangnya meta deskripsi artikel di pencarian atau pada browser mobile phone karena bot juga mencekalnya.
3. Bisa menurunkan peringkat artikel kita di serp google, karena berhubung algoritma 2105 ini google telah meluncurkan algoritma terbarunya yaitu mobilegeddon,

 

langsung praktik gan, koreksi robot.txt jangan jangan ada yang salah

 

ga pentingn kata ane, yang penting urus Judul Thread, tambah breadcrumb *cmiiw, dan atur keterangan thread

 

izin bookmark gan, bisa jadi bahan referensi ilmu SEO ane