Sejak blogger menambahkan fitur custom robots header tags ke dashboard mereka beberapa tahun yang lalu, pengguna memiliki banyak opsi untuk meng-optimize SEO blog. Kalau sebelumnya harus mengakses template html untuk menambahkan tag, sekarang kita bisa menerapkannya melalui fitur search preferences. Di area ini kamu akan menemukan 2 opsi, yaitu: robots.txt dan robots header tags.
Kegunaan dari robots header tags adalah kamu diberi kontrol bagaimana seharusnya setiap halaman diindex oleh search engine ( google, bing, yahoo, etc ). Tutorial dibawah adalah setting robots header tags yang benar bagi pengguna blogspot:
1. Didashboard, klik Settings —> Search preferences —> Crawler dan indexing —> Custom robots header tags lalu klik Edit.
2. Beri tanda centang di kotak seperti yang terlihat dibawah ini:
Setting diatas adalah yang direkomendasikan agar SE mengindex blog, konten, homepage, artikel dan tidak mengindex archive/label, tidak memperbolehkan User-agent Open Directory Project (noodp) untuk menjelajah blog kamu.
Tentu saja kamu bisa merubah setting fitur ini ke tingkat yang lebih lanjut ( advance ). Tapi sebelum ada yang dirubah, ada baiknya kamu mengetahui semua fungsi tags diatas.
All
Mengizinkan SE mengindex semua halaman dan isi web.
Noindex
Tidak mengizinkan SE mengindex halaman di hasil pencarian, juga untuk tidak menampilkan link ” cached ” di SERP.
Nofollow
Tag ini tidak mengizinkan SE untuk mengikuti link pada suatu page.
None
Mempunyai nilai yang sama dengan noindex, nofollow.
Noarchive
Tidak memperbolehkan SE menampilkan link “Cached” di SERP.
Nosnippet
SE tidak diizinkan untuk menunjukkan deskripsi singkat pada SERP sebuah halaman.
Noodp
Tag ini tidak memperbolehkan SE untuk menggunakan metadata dari Open Directory Project pada judul sebuah halaman.
Notranslate
SE tidak boleh menampilkan translate sebuah page ke SERP
Noimageindex
Image dihalaman artikel tidak diperbolehkan diindex oleh mesin pencari.
Unavailable after:
Sebuah halaman tidak akan diperlihatkan di SERP pada hari atau jam tertentu.
Seperti yang ditulis blogger: use this tool careful. Jadi jangan asal iseng centang kotak ya… Bisa – bisa blog kamu kena penalty atau bahkan hilang dari mesin pencari. Kalau pengin blog lebih SEO friendly, pakai saja setting default seperti gambar diatas.