Banować bota czy nie

[Despo]

Witam,

Kilkanascie dni temu zainteresowałem się tematerm botów/robotów i multirejestratorów, bo sam niestety padłem ich ofiarą i to przez duże O.

Otóż pewien dzieciak, (który został już srogo ukarany), postanowił pobawić się w "łabuza" i spamował moim adresem (www.cda.pl) w kilkunastu multirejestratorach co spowodowało utratę moich pozycji w google (i to znacznie) i co dziwne ban na onecie =(

Od paru dni staram się blokować te spamerskie boty (mam już pokaźną bazę Ip'eków).

Ale mam jedno malutki problemik:

Czy boty typu [jak w kodzie ponizej] mogą zaszkodzić, czy je banować? Bo wchodzą (nawet kilkakrotnie na index, nawet co pare sec.)

Mozilla/4.0 (compatible; MSIE 6.0; Windows 98; Neostrada TP 6.1; snprtz|S04629715873060#3060|isdn) 83.23.44.98 

Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; ESB{4AE8E075-F1B8-4233-B422-DFA2F3C96AC6}; exNetPanel:733338; SV1; npUID:733338) 84.234.32.58 

Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; Sgrunt|V109|867|S-264118523|dialno; snprtz|dialno) 81.210.104.10 

Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; snprtz|dialno) 84.10.130.28 

Co to jest?

Mozilla/4.0 (compatible; MSIE 6.0; Windows 98; Neostrada TP 6.1; snprtz|S04629715873060#3060|isdn)

bardzo często wpada do mnie na index, bot Neostrady? ;/ BANOWAĆ?

Z góry dzięki za odpowiedz i pomoc...

pozdr

[Erbit]

Sam user agent niewielo powie... IP spradź.

Co do 'banowania'... jest wiele opini - ja 'banuje' roboty te co do ktorych mam pewnosc ze zjadają mi transfer i np szukajki francuskie, japonskie... itp.

Jak sie doszukac ?

Po statystykach, transferze swojego serwera i z tego działu.

[Despo]

Sam user agent niewielo powie... IP spradź.

Co do 'banowania'... jest wiele opini - ja 'banuje' roboty te co do ktorych mam pewnosc ze zjadają mi transfer i np szukajki francuskie, japonskie... itp.

hmmm no oki ale jesli moja strona została dodana do miliarda miltirejestratorów i one skanują moja witrynke i dodają do setki katalogów to czy pojawianie się tego typu botów na stronie może nie niepokoić?

Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; Sgrunt|V109|19|S470338375|dialno; snprtz|dialno)

83.30.81.187

Jakbyś dał rade to zobacz jak to wygląda: www.cda.pl/roboty.php

[Erbit]

IP jest katowickie... na pewno to nie zaden powazny robot skoro sie nie przedstawia...

[edyta]

Nie wiem czy trafiłem ale podpytaj o to usera szookpl - być może to jego nie oznaczony robot - mialem taki przypadek.

Z Twych logów wynika, że zachowanie tego czegoś jest raczej typowe dla robota a nie dla usera.

Jesli to nie jego robot to nie wiem.... nie przejmowałbym się tym. Są poważniejsze szkody niż pare kilo transferu.

[Despo]

A coś takiego... banować czy nie? Ja chyba nie bede ryzykował i zbanuje

Mozilla/4.0 (compatible; MSIE 6.0; Windows 98; MSIECrawler) 83.25.148.81

Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; MSIECrawler)

83.30.4.254

TurnitinBot/2.0 https://www.turnitin.com/robot/crawlerinfo.html 204.9.204.203

PS. Są już pierwsze efekty banowania... strona skoczyłą nieco w google ;-)

[Daniel Kędzierski]

Nie nie Erbit to nie moje dziadostwo.

Moje lazi delikatnie i zostawia UA w adresie - najczesciej smiga z polpaku lub internetdsl, czasem lazi obecnie jeszcze z the planet ale top juz resztki tego lazenia.

Jakby co to moje przedstawia sie City4you.pl badz City4you/1.2

ale aby zblokowac wystarczy wpisac city bo robot rozpoznaje i plik robot.txt jak i wpisy w head

[Erbit]

A coś takiego... banować czy nie?...

Szanowni....

Pomyślcie chwile zanim zadacie pytanie.

1. Co bedzie jak zbanujecie robota google!?

2. Co bedzie gdy nie zbanujecie/niezbanujecie jakiegokolwiek robota - co ten robot Wam da a czego nie da... Na logikę to trzeba brać i tyle !

Juz pisalem... moja metoda jest taka: Japonczyki ->ban, roboty niepotrzebne ban... Po co mi informacja o polskiej stronie w japoni !? Po co mi robot szukajacy adresow mailowych !?

Sam w jednym adresie podales link TurnitinBot/2.0 -> www.turnitin.com/robot/crawlerinfo.html wiec badz uprzejmy wejdz tam i sobie poczytaj...

[EDDY]

A coś takiego... banować czy nie? Ja chyba nie bede ryzykował i zbanuje

Mozilla/4.0 (compatible; MSIE 6.0; Windows 98; MSIECrawler) 83.25.148.81

Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; MSIECrawler)

83.30.4.254

Chcesz zbanować funkcję cache'owania strony w IE?

[Despo]

https://www.cda.pl/images/statycda.jpg

co o tym powiecie? Czyż nie jest to spamerski bot? Który uniemozliwia mi wskoczenie z powrotem na dobre pozycje w google?

Banować takie boty czy co robić jak sie zabezpieczyć przed tym????

[EDDY]

Zablokuj UA snprtz|dialno czy jaki tam jest, bo słabo widać.

[Erbit]

Obawiam sie EDDY, ze nie tędy droga gdyż -> www.google.pl/search?hl=pl&c2coff=1&q=snprtz&btnG=Szukaj&lr=lang_pl

ten wpis wystepuje czesto w zwyklych logach userow... Jesli go zablokuje odpadnie cześć userów.

[michal]

Czyż nie jest to spamerski bot? Który uniemozliwia mi wskoczenie z powrotem na dobre pozycje w google?

Przepraszam, ale to mnie rozwaliło

Boty, spamerskie czy nie, nie mają wpływu na Twoją pozycję w Google (no chyba, że to akurat googlebot). Przepis na to co banować a co nie podał Ci Erbit.

[sledzik1984]

Zablokuj UA snprtz|dialno czy jaki tam jest, bo słabo widać.

104705[/snapback]

A ja obawiam się, że poleciłeś mu banować dialupy Netii...