Skocz do zawartości

Mozilla/5.0 (Windows; U; Windows NT ....

ccx

Przez ccx
w Roboty

Rekomendowane odpowiedzi

ccx Newbie

ccx

Opublikowano
Opublikowano

Znowu ja :lol:

Fri, 19 Aug 2005 12:27:11 +0200 | Wyszukiwarka: firefox  (Mozilla/5.0 (Windows; U; Windows NT 5.1; pl-PL; rv:1.7.10) Gecko/20050717 Firefox/1.0.6) | IP: 83.23.222.200

Fri, 19 Aug 2005 12:27:12 +0200 | Wyszukiwarka: firefox  (Mozilla/5.0 (Windows; U; Windows NT 5.1; pl-PL; rv:1.7.10) Gecko/20050717 Firefox/1.0.6) | IP: 83.23.222.200

Fri, 19 Aug 2005 12:27:17 +0200 | Wyszukiwarka: firefox  (Mozilla/5.0 (Windows; U; Windows NT 5.1; pl-PL; rv:1.7.10) Gecko/20050717 Firefox/1.0.6) | IP: 83.23.222.200

Fri, 19 Aug 2005 12:27:19 +0200 | Wyszukiwarka: firefox  (Mozilla/5.0 (Windows; U; Windows NT 5.1; pl-PL; rv:1.7.10) Gecko/20050717 Firefox/1.0.6) | IP: 83.23.222.200

Fri, 19 Aug 2005 12:27:24 +0200 | Wyszukiwarka: firefox  (Mozilla/5.0 (Windows; U; Windows NT 5.1; pl-PL; rv:1.7.10) Gecko/20050717 Firefox/1.0.6) | IP: 83.23.222.200

Fri, 19 Aug 2005 12:27:31 +0200 | Wyszukiwarka: firefox  (Mozilla/5.0 (Windows; U; Windows NT 5.1; pl-PL; rv:1.7.10) Gecko/20050717 Firefox/1.0.6) | IP: 83.23.222.200

Fri, 19 Aug 2005 12:27:39 +0200 | Wyszukiwarka: firefox  (Mozilla/5.0 (Windows; U; Windows NT 5.1; pl-PL; rv:1.7.10) Gecko/20050717 Firefox/1.0.6) | IP: 83.23.222.200

Fri, 19 Aug 2005 12:27:47 +0200 | Wyszukiwarka: firefox  (Mozilla/5.0 (Windows; U; Windows NT 5.1; pl-PL; rv:1.7.10) Gecko/20050717 Firefox/1.0.6) | IP: 83.23.222.200

Fri, 19 Aug 2005 12:27:55 +0200 | Wyszukiwarka: firefox  (Mozilla/5.0 (Windows; U; Windows NT 5.1; pl-PL; rv:1.7.10) Gecko/20050717 Firefox/1.0.6) | IP: 83.23.222.200

etc etc - wyżej tylko fragment. Co to jest i jak to zablokować? W robots.txt mam jak na razie:

User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows NT)

Disallow: /



User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows 95)

Disallow: /



User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows 98)

Disallow: /



User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows XP)

Disallow: /



User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows 2000)

Czy aby to wyżej zalbokować trzeba użyć. 

User-agent: Mozilla/5.0 (compatible; Firefox/1.0.6; Windows NT)

Disallow: /

Co to w ogóle za robot, i co on u mnie robi. Czy zablkowanie go, nie przyniesie żadnych szkód?

[

dreamhost.com] - różne losowe IP, darmowa domena globalna wszystko za 22,4$ ROK. Maksymalna możliwa zniżka na kod: FORUM_PIO

Informacje przedpremierowe o grze komputerowej

GTA V na PC

Odnośnik do komentarza
Udostępnij na innych stronach
kermit888 Newbie

kermit888

Opublikowano
Opublikowano

to nie robot tylko przeglądarka firefox i raczej jej nie blokuj...

zapewne używasz skryptu do łapania robotów w którym jest coś takiego:

$robot=array("firefox", "analyzer", "arena.pl", "arachnofilia", "aspseek", "check", "crawl", "googlebot", "google", "bot", "gooru", "infoseek", "inktomi", "lycos", "msnbot", "netoskop", "NetSprint", "openfind", "onet", "roamer", "robot", "rover", "robozilla", "scooter", "search", "siphon",  "siphon", "slurp", "spider", "sweep", "szukaj", "szukacz", "walker", "WebStripper", "webspider", "wisenutbot", "gulliver", "validator", "yandex", "ask jeeves", "moget@", "teomaagent", "infoNavirobot", "PPhpDig", "gigabaz", "Webclipping.com", "RRC", "netmechanic", "yahoo! slurp", "yandex",);

jeśli nie chcesz aby wyświetlało Ci firefoxa to usuń element tablicy "firefox"

pozdrawiam

Odnośnik do komentarza
Udostępnij na innych stronach
Erbit Explorer

Erbit

Opublikowano
Opublikowano

ccx

Przychylam sie do wypowiedzi kermit888.

Kolejna uwaga jest taka: nie wszysstkie roboty reaguja na robots.txt, nim przystapisz do dokonywania wpisow do tego pliku najpierw spradz (doszukaj sie) czy robot reaguje na robots.txt i na jakie polecenia. Zazwyczaj te niechciane nie reaguja na robots.txt . W takim wypadku lepiej zastosowac skrypt Piotra z tej strony https://www.forum.optymalizacja.com/ftopic3593.html , ktory po poprawnej instalacji jest skuteczniejszy niz robots.txt

Odnośnik do komentarza
Udostępnij na innych stronach
michal Newbie

michal

Opublikowano
Opublikowano
W takim wypadku lepiej zastosowac skrypt Piotra z tej strony

albo wywalic je przez htaccess tak:


RewriteCond %{HTTP_USER_AGENT} "Program Shareware 1.0.0" [OR]

RewriteCond %{HTTP_USER_AGENT} "Teleport" [OR]

RewriteCond %{HTTP_USER_AGENT} "Jetbot" [OR]

RewriteCond %{HTTP_USER_AGENT} "Exabot" [OR]

RewriteCond %{HTTP_USER_AGENT} "baidu" [OR]

RewriteCond %{HTTP_USER_AGENT} "jeeves" [OR]

RewriteCond %{HTTP_USER_AGENT} "Wget"



RewriteRule .* - [F]

Z tego co wiem to autor watku ma forum i raczej nie stosowalbym skryptu php do wywalania robotow, tylko wywalil je zanim jeszcze dotra do strony.

https://www.forum.optymalizacja.com/index.p...mp;#entry436377.

Odnośnik do komentarza
Udostępnij na innych stronach
ccx Newbie

ccx

Opublikowano
  • Autor
Opublikowano

No i transferu nie pochłaniają jak googleboty. Tylko co spowoduje ich zablkowanie? Np. zablokuje Firefoxa 1.0.6 dla Win98 i ktoś z takiej lokalizacji wejdzie na forum..?

[

dreamhost.com] - różne losowe IP, darmowa domena globalna wszystko za 22,4$ ROK. Maksymalna możliwa zniżka na kod: FORUM_PIO

Informacje przedpremierowe o grze komputerowej

GTA V na PC

Odnośnik do komentarza
Udostępnij na innych stronach
Erbit Explorer

Erbit

Opublikowano
Opublikowano
No i transferu nie pochłaniają jak googleboty. Tylko co spowoduje ich zablkowanie? Np. zablokuje Firefoxa 1.0.6 dla Win98 i ktoś z takiej lokalizacji wejdzie na forum..?

Hmmm... Kolego - masz nikłe pojęcię...

Jeśli zablokujesz na FIREFOX to wszystko co sie przedstawia FIREFOX nie dostanie sie na strone (czyli zablokujesz dostep userom), tak samo jesli zablokujesz dostem dla hasła 'win98' - wtedy wszystko co sie tak przedstawia nie dostanie sie na strone...

Nie rozumiem, po co blokowac userow...

Nie rozumiem co ma blokowanie FIREFOX'a do jakiejs tam lokalizacji !? Mylisz pojecia..

Odnośnik do komentarza
Udostępnij na innych stronach
ccx Newbie

ccx

Opublikowano
  • Autor
Opublikowano

Ajj no widziesz jaki to niedouczony na forum wszedł...

To w takim razie dlaczego na popularnej stronie dot. optymaliazji jest taki fragment w robots.txt:

User-agent: mozilla/3

Disallow: /

User-agent: mozilla/4

Disallow: /

User-agent: mozilla/5

Disallow: /

User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows NT)

Disallow: /

User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows 95)

Disallow: /

User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows 98)

Disallow: /

User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows XP)

Disallow: /

User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows 2000)

Disallow: /

[

dreamhost.com] - różne losowe IP, darmowa domena globalna wszystko za 22,4$ ROK. Maksymalna możliwa zniżka na kod: FORUM_PIO

Informacje przedpremierowe o grze komputerowej

GTA V na PC

Odnośnik do komentarza
Udostępnij na innych stronach
BD Newbie

BD

Opublikowano
Opublikowano

To w takim razie dlaczego na popularnej stronie dot. optymaliazji jest taki fragment w robots.txt:

Odpowiedzi moze byc bardzo wiele:

- nie znaja sie,

- nie lubia mozilli,

- placi im microsoft,

- placi im opera,

- moze ich www sypie sie w mozilli...

A swoja droga to jaka strone masz na mysli. Mysle, ze to ulatwi udzielenie odpowiedzi na Twoje pytanie.

Bartosz Danowski -- Literatura informatyczna -- Nero - instrukcja -- Forum laptopy
Odnośnik do komentarza
Udostępnij na innych stronach
Erbit Explorer

Erbit

Opublikowano
Opublikowano

- nie znaja sie,

coś mnie tknęło... chyba masz rację, ale raczej nie to poniżej:

- nie lubia mozilli, 

- placi im microsoft, 

- placi im opera,

- moze ich www sypie sie w mozilli...

Odpowiedz jest dosc banalna:

Żadna przeglądarka działająca w normalnym trybie nie zaczyta robots.txt , czyli kazda z tam wymienionych wejdzie na strone

Dopiero roboty, czytajace robots.txt dostrzegą, że mają nie indeksować... jedyna głupota takiego posunięcia jest taka, że ROBOT MUSI OBSŁUGIWAĆ funkcje zapisywane 2 robots.txt (a nie wszystkie roboty to robią) - w innym przypadku, pominie i wejdzie. :D:) jednak nie znają się...

ccx

Wnioski z tego takie:

1.umieszczenie tych wpisów w robots.txt nic nie daje

2.jesli umiescisz te wpisy w skrypcie Piotra to zablokujesz dostęp tym przeglądarkom, które tak się identyfikują...

3. umieszczenie tych wpisów w htaccess tak jak podał michał spowoduje podobny efekt jak dla skryptu piotra.

Odnośnik do komentarza
Udostępnij na innych stronach

Zarchiwizowany

Ten temat przebywa obecnie w archiwum. Dodawanie nowych odpowiedzi zostało zablokowane.

Tematy

  • Ostatnio przeglądający   0 użytkowników

    • Brak zarejestrowanych użytkowników przeglądających tę stronę.
×
×
  • Dodaj nową pozycję...

Powiadomienie o plikach cookie

Umieściliśmy na Twoim urządzeniu pliki cookie, aby pomóc Ci usprawnić przeglądanie strony. Możesz dostosować ustawienia plików cookie, w przeciwnym wypadku zakładamy, że wyrażasz na to zgodę. Warunki użytkowania Polityka prywatności