Indeksowanie przez google, pomocy

[Farbik]

Witam

Mam stronę a w zasadzie serwis branzowy. Google 4 razy dobę odwiedza serwis i zasysa całą jego zawartość 600MB każdorazowo. Kiedy przychodzi google serwis zatrzymuje mi prawie w miejscu.

Jak skierować go np na godziny nocne albo może macie jakieś inne pomysły.

[michal]

Większość ludzi się cieszy jak Googlebot indeksuje często stronę.

1. Zmień hosting

2. Może masz sesje w linkach dla Google i się zapętla.

[Farbik]

Ja tez się cieszę tylko po co 4 razy na dobę skoro strona jest aktualizowana co drugi dzień, na 8 indeksacji 7 zasysa to samo. Poza tym w miesiącu są to gigabajty ciągniete przez google.

W sesji nic nie mam na pewno. A możne "maginy" plik robots mozna ustawic jakoś zeby nakierunkować google? ma ktos jakieś pomysły?

pozdrawiam

[breja]

czy to onet ze ma 600MB tekstu ? !!! na poczatek to wlacz kompresje gzip a potem pomysl moze cos niepotrzebnie indexuje jezeli tak to zablokuj to w robots.txt

[Farbik]

masz rację, to nie onet i faktycznie przeliczyłem. Mam około 400 artykułów które z grafiką zajmują średni 100kb co daje w zaokrągleniu 40MB. Wiec dlaczego w stacie widze ze google zassało około 600mb. Może mam jakieś zapętlenia? czy coś takiego, jest to możliwe?

[maciek76]

masz rację, to nie onet i faktycznie przeliczyłem. Mam około 400 artykułów które z grafiką zajmują średni 100kb co daje w zaokrągleniu 40MB. Wiec dlaczego w stacie widze ze google zassało około 600mb. Może mam jakieś zapętlenia? czy coś takiego, jest to możliwe?

A sprawdź tak dla świętego spokoju IP z którego działa robot ... może to konkurencja robi ci krecia robotę? !!!