Advertisemen
Pada posting kali ini saya hanya akan memberikan tip atau trik Cara Setting robot.txt Agar SEO Friendly dan dapaty dengan mudah ditelusuri search engine, tutorial ini saya buat karena tidak bisa tidur sehingga terniat dihati untuk berbagi ilmu kepada sobat blogger.
Memang blogger telah memberikan warning agar tidak sembarangan mengubah robot.txt karena dapat berakibat blog kita tidak akan ditelusuri atau tidak diindahkan, sobat blogger bisa saja merubah pengaturan robot.txt asal tidak terjadi kesalahan maka saya akan memaparkan bagaimana cara merubah pengaturan robot.txt khusus.
Adapun caranya sebagai berikut :
1. login dulu di http://www.blogger.com
2. Setelah masuk pilih Setelan › Preferensi penelusuran seperti gambar dibawah ini (klik gambar untuk memperbesar )
3. Klik edit pada robots.txt khusus ? (lihat gambar)
4. Setelah diklik Edit pada robot.txt khusus akan tampil seperti gambar dibawah ini
5. Silahkan hapus html konfigurasi yang dilingkar merah pada gambar diatas dan ganti dengan html konfigurasi dibawah ini dan sesuaikan dengan keinginan sobat
Dengan konfigurasi seperti di atas maka semua artikel dan label akan terindeks. Dan untuk memblok robot di halaman tertentu misalanya halaman About anda, maka Anda cukup menulis robot.txt seperti berikut:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /p/about.html
Allow: /
Untuk memecahkan masalah paginasi yang muncul di blogspot setelah kita menghapus Disallow: /search maka kita bisa menggunakan konfigurasi seperti berikut untuk memblok halaman paginasi:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search?updated-min=
Disallow: /search?updated-max=
Disallow: /search/label/*?updated-min=
Disallow: /search/label/*?updated-max=
Allow: /
Konfigurasi robot.txt berikut ini adalah untuk mencegah duplikat konten atau judul di blog, khususnya duplikat konten yang terjadi karena website dilihat dari mobile phone :
User-agent: Mediapartners-Google
Disallow:
User-agent: Googlebot
Disallow: /search
Disallow: /?m=1
Disallow: /?m=0
Disallow: /*?m=1
Disallow: /*?m=0
User-agent: *
Disallow: /search
* Ganti URL diatas dengan URL blog sobat
6. Setelah konfigurasi kita ganti sesuai dengan pilih sobat maka sobat harus klik simpan perubahan
Sampai disini saya rasa sudah cukup dan bila ada pertanyaan lain silahkan sampaikan pada kolom komentar dibawah
Advertisemen