Google i jego boty

[melassa]

na stronach

google-watch.org

wyczytalem ze google obdarowywuje niektore strony czestymi odwiedzinami bota nawet kilka razy dziennie tzw fresh bot

jakie wymagania trzeba spelnic aby fresh bot zajal sie strona bo ludzie ktorzy tworza te witryne stawiaj teorie ze fresh bot odwiedza tylko wielkie witryny

z jaka srednia czestotliwoscia google bot odwiedza witryny ??

i czy gdzies nanecie mozna poczytac o botach googla ??

z google guidelines

Make sure your web server supports the If-Modified-Since HTTP header. This feature allows your web server to tell Google whether your content has changed since we last crawled your site. Supporting this feature saves you bandwidth and overhead.

o co tutaj chodzi i jak sprawdzic czy serwer ISP takie cos oferuje ??

[michal]

na stronach 

google-watch.org 

wyczytalem ze google obdarowywuje niektore strony czestymi odwiedzinami bota nawet kilka razy dziennie tzw fresh bot 

jakie wymagania trzeba spelnic aby fresh bot zajal sie strona bo ludzie ktorzy tworza te witryne stawiaj teorie ze fresh bot odwiedza tylko wielkie witryny 

z jaka srednia czestotliwoscia google bot odwiedza witryny ??

Googlebot skacze z linka na link, więc im więcej linków do Twojej strony tym częsciej Googlebot będzie się pojawiał. W tym wypadku również można powiedzieć, że im większy PR tym częstsze odwiedziny, bo PR jest uzależniony tylko i wyłącznie od linków.

Link ze strony o PR5, powoduje odwiedziny bota w przeciągu dwóch dni (średnio).

i czy gdzies nanecie mozna poczytac o botach googla ?? 

z google guidelines 

Make sure your web server supports the If-Modified-Since HTTP header. This feature allows your web server to tell Google whether your content has changed since we last crawled your site. Supporting this feature saves you bandwidth and overhead.

o co tutaj chodzi i jak sprawdzic czy serwer ISP takie cos oferuje ??

Większość serwerów to przekazuje, chodzi o to aby nie dostawał kodu 304, czyli bez zmian.