Google Robot - jak opóźniać wejścia?

[Sanchez Spinoza]

Czy można jakoś przyblokować robota google aby nie wchodził na moją stronę codziennie po kilka razy i jechał po serwerze?

Od kilku tygodni wchodzi na moją stronę z różnych 2 IP i generuje mi dość duże obciążenie.

Oczywiście nie chcę go blokować aby mi strony nie wypadły z Google i żeby nie stracić pozycji więc czy jest jakiś sposób żeby zaznaczyć mu aby wchodził do mnie np. raz na 2 dni?

[gibki]

W narzędziach dla webmasterów masz opcję.

Mógłbyś go na różne sposoby wyciąć skryptowo, ale wg mnie to ryzykowne (jeśli np. go gdzieś wyślesz, to przedstawisz botowi inną wersję strony niż userowi, a to grzech )

[zebol]

User-agent: Googlebot

Crawl-delay: 10

Zmień częstotliwość

[Gość]

Narzędzia dla webmasterów -> [wybierz swoją stronę] -> Konfiguracja witryny -> Ustawienia -> Szybkość indeksowania

[zebol]

No faktycznie to takie proste.

Szkoda tylko jeśli bot Yahoo robi nam zamęt.

Pająk cholernie upierdliwy.

Co wtedy ?

Może zwykła komenda w TXT ?

[Davi]

Na roznych stronach w meta tagach widzialem taki oto kodzik :

<META name="revisit-after" content="10 Days">

Ale nie wiem czy to jest skuteczne

Btw. Witam mieszkanca Bielska

[zebol]

Poczytaj temat dla początkujących - przyda się.

Edit:

nie dodałem:

User-agent: *

Crawl-delay: 10

komenda dotyczy wszystkich pająków korzystających z robot.txt

[M@k]

User-agent: *

Crawl-delay: 10

komenda dotyczy wszystkich pająków korzystających z robot.txt

Google tego nie obsługuje, opóźnienia tylko w panelu

[Sanchez Spinoza]

Dzięki za odpowiedzi,

czy takie ustawienia opóźnienia w Narzędziach dla webmastera nie spowoduje spadków pozycji?

P.s Davi witam także :]

EDIT:

Po zmiany szybkości indeksowania takie oto mnie spotkały informacje:

Twoje zmiany zostały pomyślnie zapisane i będą obowiązywać do dnia 02-01-2011

Extra :] chyba szybciej będzie ręcznie coś modyfikować.

[M@k]

Nie jeśli są to opóźnienia ustawione tylko w panelu. Chyba że strona się wolno wczytuje i dlatego to ustawiasz.

[Sanchez Spinoza]

Ok dzięki.

Żeby nie zakładać nowego postu spytam tu, otóż czy można w htaccess zawrzeć jakąś regułę która zakaże innym stronom przemierzania mojego serwisu i kopiowania jego zawartości?

Chodzi mi oto że mam serwis z ogłoszeniami i kilka innych stron pasożytuje na mnie kopiując automatycznie dane z mojej strony i wklejają je na swoje strony.

Czy można im tego uniemożliwić? Coś takiego jak z obrazkami że wyłącza się hotlinkowanie i obrazek z mojego serwera nie może być wyświetlony gdzieś indziej.

Jest taka formuła?

[Gość]

Raczej nie, bo jak rozpoznasz inny serwis www od użytkownika? Po ilości odpytań?

A sprawdzanie do useragencie można chyba ominąć.