Googlebot szaleje ;/

[jamesisko]

Witam,

czy tez macie cos takiego co mnie w szook wprowadzilo?

https://www.wojewodztwo.pl/wojewodztwo.jpg

tutaj jest link ze screenem tego co bot mi robi na jednej domenie.

99% to google bot

szaleje jak durny.. po od 30 do 70 tys wejsc na dobe ;/

[kilofff]

wogle cos ostatnio problemy chyba sa z indeksowaniem przez google. nawet artykul schizofrenia google widac

[jamesisko]

no nie wim czy to problemy - jakos nie ma oporow podczas indeksacji.

efekty zapewne beda za pare tygodni.

[Daniel Kędzierski]

james ano szaleje

nawet malo tego, widac zgubil sporo stronw indeksie skoro zaczol lac na nofollow i indeksueje linki zewnetrzne.

Czyli zbiera domeny do zasobów bo sporo pogubil i szpera tam gdzie się da.

Mi tak szalał że w KEI zaczeli mi 403 dawac bo serwer nie wyrabial co pisalw w wątku hosting, na cale szczescie juz poprawili i dali full dla googlasa, podobno google zaczol szalec im maksymalnie po wszystkich serwerach.

[jamesisko]

tak, ta domena to tylko przyklad z jednej.

pozostale domeny tez troche mniej ale oblegane tez sa ;/

normalnie chbya porobie wiekszosc wszedzie keszowanie stron, bo otworzylem kolejne seriwsy i ... nie wiem czy wytrzyma sql.

[tomick]

To może czas zainwestować w cache wyników zapytań?

[jamesisko]

Zmiana serwera, szybkosc i dostepnosc stron zaowocowala zwiekszeniem aktywnosci google bota i czesciowo ludzi

https://www.jamesisko.pl/transfer.jpg

i tego efekt

wyniki sql sa keszowane

to przyklad tylko jednej domeny, taki katalog gdzie dane sa tekstowe - strach pomyslec gdyby tam byly foty...

[mprojekt]

mam dokladnie to samo jakos od maja mi wyjada caly trafic normalnie na jedenej stronie powino byc dziennie po okolo 2 gb a czasami googlebot zje 10 gb w jedna dobe jak tak dlaej pojdzie bede musial zminic hosting na wiekszy

[Daniel Kędzierski]

10 GB na dobe ?

Zmienic na wiekszy hosting ?

To gdzie ty hostujesz ze oferuja ci mozliwosc zjechania 100-300 GB miesiecznie dla samego robota ?

Co do za pakiet. ?

Bo ja rozumiem all ze tapety ciagna sporo transferu, pliki mp3 i inne badziewie.

Ale zakladajac srednia 20 KB ilosc kody jaka pobierze google wychodziloby ze: googlebot pobral ci: 500 TYS podstron w ciagu DOBY.

Dobra masz olbrzymie strony wszystkie po 100 KB to pobralbym w jedną dobrę 100 tys takich podstron ?

Lubie czasem przesade na tym forum.

Googlebot pobral 10 GB ) w jeden dzien to chyba pobieral z obrazkami i mp3 i sciagnol sobie jeszcze jakis HIT kinowy.

Chyba musisz zmienic skrypt do zliczania robotowych wizyt.

Bo skoro ggbot zjada ci 10 GB traficu dziennie to userzy powinny zjadac po 50 GB, tak jakos widze to sensownie.

A ty piszesz ze masz zwykly hosting.

Pozdro

sprawdz sobie te skrypty

[jamesisko]

Panie szook, chbya do mnie nie pijesz ta wypowiedzia, jesli znasz DA to bedziesz wiedzial jak to wyglada. Do danej domeny sa staty. www.directadmin.com tutaj sie zaloguj jako admin i jest tam taki przycisk co pokazuje staty, ale to sa staty tylko jednej domeny. Nie wiem jak to wyglada na zwyklym koncie, ale sajty przynajmniej moje tak sa indeksowane - stety lub nie staty - ale spokojnie mieszcze sie w limicie 2 giga na miesiac, wiec spie spokojnie

[Daniel Kędzierski]

james nie gdzie do Ciiebir

Przyeczytaj ze wyraznie post kolegi wyzej on pisze o 2 Gb dziennie a doszlo mu do 10 Gb dziennie

Ja nie pisze o takich sitach jak takie jakie obslugujemy.

Dlatego co ja mialbym do Ciebie pisac, ja napisalem ze dla mnie malo wiarygodne jest zeby google nagle zaczol jechac 10 Gb dziennie

Ty napisales normy 2 gb miesiecznie to jest jakas tam norma ale przynasz ze 300 Gb miesiecznie to juz sporasnie heh jak na googlebota

[EDDY]

Niedawno przez "niekończący się" plik miałem zeżarte 12 GB przez Gbota, ale w ciągu 2 tygodni.

Średnia mi wyszła 35 MB na wejście.

[Daniel Kędzierski]

no tak Eddy mozna zrobic blad i bedzie jadlo.

Ale zgodzisz sie ze jednak liczby ktory napisal kolega w postaci wzroslo do 10 Gb dziennie są przesadzone

[zgred]

u mnie poza zżartymi GB jest jeszcze cos: jedna witryna w ciagu 3 dni skoczyła o 150 pozycji :| do drugiej 10tki ...

[EDDY]

Zgadzam się, dlatego napisałem o podobnych transferze, ale w ciągu 2 tyg. a nie dobowo.

Chyba, że on ma same pliki z błędem.