“Robots.txt ne yapar? Web’de ne işe yarar?” diyorsanız önce okuyalım derim.
Şimdi birden aklıma geldi ben Google için robots.txt hazırlıyorum ama Google’un kendisi ne hazırlamış? Belki buna daha önce bakmışsınızdır. Ama bakmayanlar için güzel bir eğlence olacak.
Bu dosya sayesinde Google kendisinde hangi adreslerin indexlenmesini istemediğini yazıyor. Herhalde kısır döngü ile indexini indexletmesin diye. İşte ilginç bir iki tane, diğerlerini de siz deneyin. Böylece Google’un gözümüzden kaçan birçok işi ortaya çıkıyor.
http://www.google.com/sms/demo Cep telefonu olayı
http://www.google.com/microsoft Var mı böylesi kimileri de rakip der bu iki şirkete.
http://www.google.com/unclesam Sam Amca Amerikaaaa
http://www.google.com/pda PDA ekranına sığsın diye minimalistlere sunulur.
http://www.google.com/cobrand
Dosyanın orjinal kaynağı: www.google.com/robots.txt
Kod:
User-agent: *
Allow: /searchhistory/
Disallow: /search
Disallow: /groups
Disallow: /images
Disallow: /catalogs
Disallow: /catalogues
Disallow: /news
Disallow: /nwshp
Disallow: /?
Disallow: /addurl/image?
Disallow: /pagead/
Disallow: /relpage/
Disallow: /sorry/
Disallow: /imgres
Disallow: /keyword/
Disallow: /u/
Disallow: /univ/
Disallow: /cobrand
Disallow: /custom
Disallow: /advanced_group_search
Disallow: /advanced_search
Disallow: /googlesite
Disallow: /preferences
Disallow: /setprefs
Disallow: /swr
Disallow: /url
Disallow: /wml?
Disallow: /xhtml?
Disallow: /xml?
Disallow: /imode?
Disallow: /jsky?
Disallow: /pda?
Disallow: /sprint_xhtml
Disallow: /sprint_wml
Disallow: /pqa
Disallow: /palm
Disallow: /gwt/
Disallow: /purchases
Disallow: /hws
Disallow: /bsd?
Disallow: /linux?
Disallow: /mac?
Disallow: /microsoft?
Disallow: /unclesam?
Disallow: /answers/search?q=
Disallow: /local?
Disallow: /local_url
Disallow: /froogle?
Disallow: /froogle_
Disallow: /print?
Disallow: /books?
Disallow: /scholar?
Disallow: /complete
Disallow: /sponsoredlinks
Disallow: /videosearch?
Disallow: /videopreview?
Disallow: /videoprograminfo?
Disallow: /maps?
Disallow: /translate?
Disallow: /ie?
Disallow: /sms/demo?
Disallow: /katrina?
Disallow: /blogsearch?
Disallow: /blogsearch/
Disallow: /blogsearch_feeds
Disallow: /advanced_blog_search
Disallow: /reader/
Disallow: /chart?
Disallow: /transit?


















YORUM YAZMADAN ÖNCE:
Türkçe yazanlar için hatırlatmalar;
* Cümle büyük harfle başlar, nokta ile biter.
* Noktadan sonra boşluk bırakılır, yeni cümle başlar.
* "gelcem, gitcem, gidiyom" denmez "geleceğim, gideceğim, gidiyorum" denir.
* "Herkez" denmez "herkes" denir.
* "Yaaaa" çok laubali bir sözdür.
* "bU şEkiLDE" yazmak sadece okuyanı yorar.
* "Yanlız" değil "Yalnız" denir.
* "ğ" harfi "g" şeklinde yazılamaz.
* "Dahi" anlamındaki "de" ayrı yazılır. Yani "Bende, sende" denmez, "Ben de, sen de" denir.
* "Geldimi?" yazılmaz "Geldi mi?" yazılır. Soru takıları ayrı yazılır. "OKmi?" değil, "Tamam mı?" denir.
* "ahmet, belgin, duru" denmez. "Ahmet, Belgin, Duru" denir. Özel isimlerin, illerin, ülkelerin ilk harfleri büyük yazılır.
* "ki" eki, bağlaç olarak kullanılıyorsa ayrı, iyelik eki olarak kullanıyorsa birleşik yazılır.
* "v" yerine "w" yazılmaz...
...
Yani Türkçe, Türkçe yazılır. MSN Türkçesiyle değil.
* Yurtdışından yazan, Türkçe klavyesi olmadığından ğ, ş, ü, ç, ö, ı harflerini yazamayanlar için:
Lütfen buraya tıklayın, yazınızı yazın ve "Türkçeleştirdikten" sonra, seçip yandaki kutuya yapıştırın. Teşekkürler.
TÜRKÇE YAZ KAMPANYASI
* Web siteniz varsa lütfen "TÜRKÇE YAZ" kampanyasına katılın. Sitenizi onur listemize ekleyelim. Detaylı bilgi için tıklayınız.* Eğer konuyla ilgili değil, güzel Türkçe kullanımı için yorum yazmak istiyorsanız, lütfen Türkçe Yaz Kampanyası'nın sayfasına buyrun.
SİZİN FİKRİNİZ NE? YORUM YAZIN
Lütfen bu makaleyi eleştirin. Aradıklarınızı buldunuz mu?
Sizin için yeterli mi? Neler eklense daha iyi olurdu?
Eğer beğendiyseniz hangi unsurlar çok iyiydi? İç kalite sistemimizin gelişmesi için yorumlarınıza ihtiyacımız var.
yörüngeye girin, yıldızları seyredin :)
Yorumlara Abone Olun
*Twitter Yalanları
*TechCrunch & Webrazzi MeetUp Etkinliğindeydim
*Yeni Siteler ve Yenilenenler
*Blogküreden Yükselen Ruhlar!
*Türkiye’de Teknoloji Eğitimi ve Eğitimcilere Öneriler
*Ayın Aydınlık Yüzü
*O Robota Sevgimden Firefox Kullanıyorum ;)
*Esperanto | Umutların Evrensel Dili
*Bülent İnce | Stok Fotoğrafçılığı Üzerine
*Türkiye’nin En İyi Kültür Sanat Blogu Seçildik
*Albino Zeka
*Grafist12 | 12. Uluslararası İstanbul Grafik Tasarım Günleri
*National Geographic Fotoğrafçılık Okulu
*Nimet Demirbağ Sanlıman Bursa’da
*BALKIZ | Terkedilmiş Arabanın Hazin Öyküsü
*Total Recall | Gerçeğe Son Çağrı
*Dünya Günü | Earth Day
*Escape From Sandbox | SEO’ya Yeni Yaklaşımlar
*EuroPass | Evrensel CV Standart Formatı
*The Forbidden Kingdom | Yasak Krallık
*Bloglar İçin Yeni Gelir Modellleri
*Yurtta ve Dünyada “Güneş”li Bir Hava Var :)
*En Sevdiğimiz Film Sahneleri - mim
*Wordpress’le Aramak Yerine, Google’la Para Kazanın
*Pixel Art | Noktalardan Resim Çizenler
*Reklam-im Cennet’ten Döndü!
*Dünyayı Sevgi Kurtaracak
*Evsizler | Homeless
*Whose Hand is this? | Bu El Kimin Eli?
*Bloglama’dan Blog Ödülleri - 2008