Zwiekszony transfer przez googlebot i yahoobot.

[egregor]

Witam,

w zeszlym miesiacu Google wygenerowal mi 3GB a yahoo 1.5GB co dosc mocno obciaza mi transfer na serwerze. Czy mozna temu jakos zapobiec?

(strona www.inverti.pl - sexshop).

[gostek_]

Mozna zablokować dostęp tym botom, w robots.txt.

Ale lepiej juz chyba dokupic dodatkowy transfer, niz ograniczać wizyty googlebota.

[egregor]

Mozna zablokować dostęp tym botom, w robots.txt.

Ale lepiej juz chyba dokupic dodatkowy transfer, niz ograniczać wizyty googlebota.

Wlasnie o tym pomyslalem, ale jak zrobie nofollow to mi strona straci pozycje w google?

[jurdziol]

Mozesz w narzedziach webmastera zmniejszyc szybkosc indeksowania

( https://www.google.com/webmasters/tools/siteoverview ).

Jednak najlepiej dokupic transfer.

[forpan]

A ile waży twoja strona? Na ile odwiedzin googla przekłada się te 3GB? Może warto pomyśleć o zoptymalizowaniu kodu i grafiki pod względem objętości. Zauważ, że jeden niepotrzebny znak (bajt) w kodzie strony przy 1 mln odwiedzin to 1GB transferu w śmietniku.

[Kyo]

Forpan ma racje, a ja dodam ze crawl-delay nic nie da..

Sprawdz czy nie masz na stronie jakich petli - np dynamisznie generowanych linkow sortowanych po rand(). U mnie robot na tym lazil i lazil.

[Stwor]

może czas na optymalizację strony; zmniejszyć jej wagę

[Mion]

A ile waży twoja strona? Na ile odwiedzin googla przekłada się te 3GB? Może warto pomyśleć o zoptymalizowaniu kodu i grafiki pod względem objętości.

Google bot nie pobiera grafiki tylko sam kod (X)HTML strony. Jeśli nie masz to zainteresuj https://forum.joomla.pl/showthread.php?t=418

[.::JARO::.]

kup sobie lepsze konto bo jak prowadzisz sex shop i żałujesz nawet 5GB / miech na boty to śmieszne to jest...

Zablokuj obrazki do indeksacji przez google biedaku ty ...

To są właśnie skutki kupowania konto gdzie liczy się FTP 999999999 GB i 100 GB transferu na rok

[venon]

Dokup transfer i zmniejsz czas pomiedzy indexowaniem

[Stwor]

zmniejsz czas pomiedzy indexowaniem

nic nie zmniejszaj, tylko więcej transferu