Optimasi SEO Setting robots.txt
1. Analyze our blogger robots.txt default
Cek http://www.cyberraptor.org/robots.txt
kemudian replace http://www.cyberraptor.org dengan Blogger Url anda, silahkan bandingkan perbedaannya dengan default robot blogger anda. Default robots.txt semua blogger bawaan lahir, biasanya seperti ini
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://www.cyberraptor.org/feeds/posts/default?orderby=updated
Disallow: /search, artinya blogger memberi batasan bahwa semua robot search engine dilarang untuk mengindex semua link di dalam blog yang diawali dengan /search.
Link label blogger atau juga wildcard query, misalnya : http://www.cyberraptor.org/search?q=SEO.
Sitemap: http://www.cyberraptor.org/feeds/posts/default?orderby=updated
Sitemap Query information
2. Customize Your Sitemap
Login to dashboard : draft.blogger.com bagi yang belum diupgrade dashboardnya
klik Settings - Search Preferences a.k.a Setelan - Preferensi penelusuran kalau gak salah inget
'Custom Robots' , klik Edit; Enable - Yes
Robots Blogger Sitemap Default:
Sitemap: http://www.cyberraptor.org/feeds/posts/default?orderby=updated
Setting robot default blogger, pada query peta situs bin sitemapnya hanya menginformasikan sebanyak 26 blog post alias 26 artikel yang baru diedit.
Blogger Sitemap Custom Version:
Sitemap: http://www.cyberraptor.org/feeds/posts/default?orderby=updated&max-results=500
The conclusion, 'optimasi seo robots blogger' versi blog seo katro kurang lebih seperti ini
Sitemap: http://www.cyberraptor.org/feeds/posts/default?orderby=updated&max-results=500WARNING PREN: replace http://www.cyberraptor.org dengan url blog anda, kemudian Save changes.
User-agent: Mediapartners-Google
Disallow:
User-agent: Alexibot
User-agent: Mozilla/4.0 (compatible; BullsEye; Windows 95)
User-agent: WebBandit
User-agent: Zeus
Disallow:/
User-agent: *
Disallow: /search
Khusus yang ditandai warna merah adalah beberapa contoh bad robots.
3. Block URL post via Robots blogger
Optional, biasanya apabila in your blog memiliki contact pages, privacy policy, disclamer etc, You bisa menambahkan disallow pada beberapa link artikel tersebut. Alasannya karena tidak ada gunanya juga halaman tersebut terindex di search engine. Ada baiknya juga kalau dipindah dari navbar blog atau disisipi rel="nofollow" agar robot search engine tidak menggerayangi isi blog dikau :D
Contohnya satu saja ya; misalnya link artikel anda adalah yourblogspot.com/p/disclaimer.html
maka untuk block search engine, paste kode ini di bawahnya or add this code below afterDisallow: /search
Disallow: /p/disclaimer.html
Save Changes
