YandexBot/3.0

[StreamStudio]

Witam,

po stronie od dawien dawna łazi mi bot YandexBot/3.0. Unicestwić czy zostawić? Jeśli tak to jakim sposobem?

Pozdrawiam!

[Gość]

Zablokować po IP?

[Arni]

no bo łajza do zapisów w robots się nie stosuje

[Paq]

Skorzystałem z tego i sprawdza się znakomicie, Yandex nie skacze mi już po witrynie.

[iMariush]

Dzięki Paq przyda się

[Rainmaster]

A ja jeszcze przypomnę fantastyczny skrypt blokujący nam każdego upierdliwego bota niezależnie od tego jak się przedstawia https://docs.google.com/View?id=dgkd4pj4_0hfj5j4gx

[Arni]

YANDEX jest znany ze swych właściwości pobierania wielkiej ilości danych z serwera bez zwracania ruchu,

ta metoda pozwoli na blokowanie robota bez konieczności blokowania adresu IP, zapis jest w .htaccess

<Limit GET POST>
#The next line modified by DenyIP
order allow,deny
#The next line modified by DenyIP
#deny from all
allow from all
</Limit>
<Limit PUT DELETE>
order deny,allow
deny from all
</Limit>

<Files 403.shtml>
order allow,deny
allow from all
</Files>

SetEnvIfNoCase User-Agent .*Yandex.* bad_bot

order allow,deny
deny from env=bad_bot
allow from all

a może

RewriteEngine on
RewriteCond %{HTTP_USER_AGENT} ^Yandex [OR]
RewriteCond %{HTTP_USER_AGENT} ^np. drugi bot
RewriteRule .* - [F]