Belki buna daha önce bakmışsınızdır. Ama bakmayanlar için güzel bir eğlence olacak.
Bu dosya sayesinde google kendisinde hangi adreslerin indexlenmesini istemediğini yazıyor. Herhalde kısır döngü ile indexini indexletmesin diye. İşte ilginç bir iki tane. Diğerlerini de siz deneyin. Böylece Google'un birçok gözümüzden kaçan işi ortaya çıkıyor.
Linklerin ve Resimlerin Görülmesine izin VerilmiyorLinki veya Resmi Görebilmek için [[ Tıkla ÜYE OL ]] veya
[[ Giriş Yap ]]http://www.google.com/sms/demo?
Cep telefonu olayı
Linklerin ve Resimlerin Görülmesine izin VerilmiyorLinki veya Resmi Görebilmek için [[ Tıkla ÜYE OL ]] veya
[[ Giriş Yap ]]http://www.google.com/microsoft?
Var mı böylesi kimileri de rakip der bu iki şirkete.
Linklerin ve Resimlerin Görülmesine izin VerilmiyorLinki veya Resmi Görebilmek için [[ Tıkla ÜYE OL ]] veya
[[ Giriş Yap ]]http://www.google.com/unclesam?
Sam Amca Amerikaaaa
Linklerin ve Resimlerin Görülmesine izin VerilmiyorLinki veya Resmi Görebilmek için [[ Tıkla ÜYE OL ]] veya
[[ Giriş Yap ]]http://www.google.com/pda
PDA ekranına sığsın diye minimalistlere sunulur.
Linklerin ve Resimlerin Görülmesine izin VerilmiyorLinki veya Resmi Görebilmek için [[ Tıkla ÜYE OL ]] veya
[[ Giriş Yap ]]http://www.google.com/cobrand
Google nin kendi robot.txt
User-agent: *
Allow: /searchhistory/
Disallow: /search
Disallow: /groups
Disallow: /images
Disallow: /catalogs
Disallow: /catalogues
Disallow: /news
Disallow: /nwsHp
Disallow: /?
Disallow: /addurl/image?
Disallow: /pagead/
Disallow: /relpage/
Disallow: /sorry/
Disallow: /imgres
Disallow: /keyword/
Disallow: /u/
Disallow: /univ/
Disallow: /cobrand
Disallow: /custom
Disallow: /advanced_group_search
Disallow: /advanced_search
Disallow: /googlesite
Disallow: /preferences
Disallow: /setprefs
Disallow: /swr
Disallow: /url
Disallow: /wml?
Disallow: /xhtml?
Disallow: /xml?
Disallow: /imode?
Disallow: /jsky?
Disallow: /pda?
Disallow: /sprint_xhtml
Disallow: /sprint_wml
Disallow: /pqa
Disallow: /palm
Disallow: /gwt/
Disallow: /purchases
Disallow: /hws
Disallow: /bsd?
Disallow: /linux?
Disallow: /mac?
Disallow: /microsoft?
Disallow: /unclesam?
Disallow: /answers/search?q=
Disallow: /local?
Disallow: /local_url
Disallow: /froogle?
Disallow: /froogle_
Disallow: /print?
Disallow: /books?
Disallow: /scholar?
Disallow: /complete
Disallow: /sponsoredlinks
Disallow: /videosearch?
Disallow: /videopreview?
Disallow: /videoprograminfo?
Disallow: /maps?
Disallow: /translate?
Disallow: /ie?
Disallow: /sms/demo?
Disallow: /katrina?
Disallow: /blogsearch?
Disallow: /blogsearch/
Disallow: /blogsearch_feeds
Disallow: /advanced_blog_search
Disallow: /reader/
Disallow: /chart?
Disallow: /transit?
