IRLbot/2.0 (compatible; MSIE 6.0; http://irl.cs.tamu.edu/crawler)

[kalinowski]

Czy może on zaszkodzić mojej stronie? Szukałem w temacie z listą robotów ale nie znalazłem ;/

Z góry dzieki za pomoc..

[mkr]

IRL-crawler is a Texas A&M research project sponsored in part by the National Science Foundation that investigates algorithms for mapping the topology of the Internet and discovering the various parts of the web. The crawler downloads random web pages (text only) and follows certain links to find other websites.

Zostawia link do informacji przeciez. Bada topologię sieci. Czasami wariuje. Mi pobral kilkanascie razy ta same strony w ciagu kilku godzin. Mozesz blokowac

[kalinowski]

Dzięki za info