bot-google
Google BotGooglebot, Google tarafından kullanılan bir arama bot'udur. Bu bot web'deki dökümanları toplar ve Google Arama Motoru için aranabilir bir içerik listesi ( index ) yaratır. Eğer site yöneticiyseniz ve sitenizin Google aramalarında ya da herhangi bir arama motoru botunun indeksleme işleminde çıkmasını istemiyorsanız sitenizin dizininde bir robots.txt adlı dosya yaratarak , yada sadece Googlebot için aşağıdaki meta etiketini kullanarak botların indekslemesini engelleyebilirsiniz.
<meta name="Googlebot" content="noindex">
Googlebot'un indeksleme yapabilmesi için , sunucularda "googlebot.com" içeren bir web sitesi (host address )ve içinde Googlebot kelimesinin geçtiği bir user-agent kodlu metine ihtiyaç duyarlar. Bakınız : robots.txt
Googlebot'un iki sürümü vardır: "Derinbot" (deepbot) ve "yenileyici bot" (fresh bot).
Deepbot Web'de bulunan bütün bağlantıları takip etmeye çalışır ve birçok sayfayı Google indeksleyicisine indirir. Bu işlemi ayda bir kez yapar ve tamamlar.
Freshbot web sayfalarındaki yenilenmiş içerikleri tarar. Sıklıkla yenilenen web sitelerini değişme sıklıklarınıa bağlı olarak tarar , değişikleri kontrol eder. Yalnız Googlebot HREF ve SRC linkleri takip eder.
Googlebot bir sayfayı , o sayfa üzerinde bulunan bütün bağlantıları ziyaret ederek işler, sonrada o bağlantılardan başka web sayfalarına geçer. Bu nedenle ayrıca yeni web sayfaları indekslenmek için başka bilinen web sayfalarından ulaşılabilmelidir.
Site yöneticileri, Googlebot'un tarama yaptığı sırada siteye ayrılan bant genişliğinin çoğunu kullandığını ve bu nedenle web sitelerinin zaman zaman bant genişliği limitlerini aştığını ve geçici olarak sitelerinde çökmeler olduğunu belirtmektedirler. Bu durum özellikle onlarca gigabyte veri barındıran yansıma--ayna-- (ing. mirror ) siteler için sorun olmaktadır. Google ayrıca site yöneticilerini tarama ( indekslenme ) oranlarını yükseltmek için çeşitli yolların anlatıldığı bir Webmaster Tools sayfasına sahiptir.
Google Bot IP numaraları
164.71.1.146
164.71.1.147
164.71.1.148
164.71.1.149
192.51.44.10
192.51.44.13
192.51.44.18
192.51.44.19
209.185.108
209.185.253
210.131.75.80
210.131.75.81
210.131.75.82
210.131.75.83
210.131.75.84
216.33.229.163
216.239.33.96
216.239.33.97
216.239.33.98
216.239.33.99
216.239.37.98
216.239.37.99
216.239.39.98
216.239.39.99
216.239.41.96
216.239.41.97
216.239.41.98
216.239.41.99
216.239.45.4
216.239.46
216.239.51.96
216.239.51.97
64.68.90.162
64.68.90.163
64.68.90.164
64.68.90.165
64.68.90.166
64.68.90.167
64.68.90.168
64.68.90.169
64.68.90.17
64.68.90.170
64.68.90.171
64.68.90.172
64.68.90.173
Kaynak : Wikipedia (kısmen)
Etiketler : Google bot, google nedir, google bot IP, ip, google bot çağırma, google bot siteme ne zaman geldi, google botları, google bot visit, google bot ping , google bot gelmiyor, google bot çağır, google bot last access
