Blokowanie robotów htaccess ?

[intruder2600]

Czy ktoś ma sprawdzony sposób, jak w miarę skutecznie wyciąć traffic pochdzący od botów i innych spamerskich skryptów, zostawiając tylko Google, Yahoo, Msn ? Chodziłoby mi też o blokowanie wszystkiego co pochodzi z Rosji, Chin itp.

[NieW]

Czy ktoś ma sprawdzony sposób, jak w miarę skutecznie wyciąć traffic pochdzący od botów i innych spamerskich skryptów, zostawiając tylko Google, Yahoo, Msn ? Chodziłoby mi też o blokowanie wszystkiego co pochodzi z Rosji, Chin itp.

Ad. 1

Tak prosto tego nie rozwiążesz, no chyba że sporządzisz sobie listę tych niechcianych botów, a potem:

RewriteCond %{HTTP_USER_AGENT} nazwa1 [OR]

RewriteCond %{HTTP_USER_AGENT} nazwa2

...

RewriteRule .* - [F]

Ad. 2

https://www.spambutcher.com/htsample.txt

[intruder2600]

Dzięki, w panelu Plesk mam ustawienia firewalla i dodaje systematycznie zakresy 202.111.11.11/8 itp. mam nadzieje, że to wytnie wszystko, czego nie potrzebuję.

[NieW]

Tu masz całą Azję:

https://www.apnic.net/publications/research...-resource-range

[intruder2600]

Dzieki wielkie, a jest moze jakas lista samych robotow sieciowych typu yandex, infobot itp ?

[NieW]

Dzieki wielkie, a jest moze jakas lista samych robotow sieciowych typu yandex, infobot itp ?

ja swego czasu korzystałem z

https://www.robotstxt.org/db.html

ale nie wiem na ile jest to aktualna lista

Przy okazji IP<--> country to zobacz na: https://www.countryipblocks.net/ (nawet generuje .htaccess'a)

Edyta:

https://www.user-agents.org/

[intruder2600]

Wielkie dzieki za pomoc

[Dominik23]

Wystarczy że na https://www.countryipblocks.net/country-blo...select-formats/ po prawej wybierzesz RUSSIAN FEDERATION.

Jak zablokujesz dostęp ruską będziesz miał połowe spamu mniej.

[intruder2600]

Dzięki, wyciąłem właśnie Chiny, Rosje itp i efekt - kilka minut po zapisaniu ustawień:

Last 1 minute 0.61

Last 5 minutes 0.76

Last 15 minutes 0.82

update - chwile później:

Last 1 minute 0.33

Last 5 minutes 0.66

Last 15 minutes 0.79

haha, dziala

[mrozik]

Witam, a czy ktoś może mi powiedzieć jak ma wyglądać htcaccess aby blokować wschodnich braci ?

[Arkadiusz]

Order Allow,Deny

Allow from all

Deny from 110.0.0.0/8

Deny from 111.0.0.0/8

Deny from 112.0.0.0/5

Deny from 120.0.0.0/6

Deny from 124.0.0.0/8

Deny from 125.0.0.0/8

Deny from 147.0.0.0/8

Deny from 169.208.0.0

Deny from 175.0.0.0/8

Deny from 180.0.0.0/8

Deny from 182.0.0.0/8

Deny from 183.0.0.0/8

Deny from 202.0.0.0/8

Deny from 203.0.0.0/8

Deny from 210.0.0.0/8

Deny from 211.0.0.0/8

Deny from 218.0.0.0/8

Deny from 219.0.0.0/8

Deny from 220.0.0.0/8

Deny from 221.0.0.0/8

Deny from 222.0.0.0/8

[mrozik]

dzięki

[master]

Gdzieś na forum widziałem (i skorzystałem) z gotowego wpisu do .htaccess zawierającego blokadę mnóstwa spamerkich IP. O ile mnie pamięć nie myli to topic założył Adek

[Arkadiusz]

Nie warto blokować miliona IP przez .htaccess, bo to możne znacznie obciążyć maszynę. Lepiej zrobić to na poziomie serwera (firewall) lub blokować duże klasy (jak w moim przykładzie 3 posty wyżej).

[master]

Tak, ale przy blokowaniu całych klas istnieje prawdopodobieństwo zablokowania dostępu "normalnym" userom