Scrapebox v 1.0 - 2.0

[Carnagge]

@aniec to, ze walnales blasta na 80k liste i 80% bylo AA to pozniej sie pewno okazalo, ze z tego unikalnych domen bylo pewnie 10%

SB ma bardzo male wymagania i idzie praktycznie na kazydm VPSie. Tylko, ze zauwazylem, ze mimo mozliwosci dodawania powyzej 100 watkow to skutecznosc drastycznie spada.

[Mar_Dal]

Jakie to sa koszta? Co tam potrzeba, oprócz licencji SB?

Dobre proxy, najlepiej shared do harcestowania, prywatne do postowania.

[djurek]

Czy jak ustawie 500 wąłtków na vps to będzie taka same lipa jak na kompie domowym?Który VPS jest odpowiednie? (link)

[Mar_Dal]

Nie ma sensu ustawiać maksymalnego połączenia bo gubi wątki i nie ma takiej efektywności. Z moich obserwacji wynika, że najlepsza obecnie skuteczność jest w przedziale 50-150 w zależności od time out'u.

[djurek]

Czyli zwykły komp daje sobie świetnie rade na tych ustawieniach

[Mar_Dal]

Myślę, żę komputer klasy 486 dałby sobie radę z SB

[aniec2]

@Carnagge akurat lista 23k unikalnych

@Mar dobrze śmiga grunt zeby zgłaszac im prośbe resetu co 7 dni (tak jakby sie zamulał serwer choć to dziwne...) Mar a jak SB chodzi na tm wyprzedanym serverze?

@Djurek przy fast poscie 500 smiga spokojnie. potrzebujesz SB:)

Ogólnie zwisy są i bedą ale podejrzewam, że duża wina w tym blogów (kilka stron wcześniej omawiałem).

Oczywiście mówie o najwyższym pakiecie.

Edytowane 24 Lutego 2011 przez aniec2

[djurek]

Najwyższy czyli który? Czyli generalnie jedynie przyspieszam się dodawanie i tyle w temacie. Skuteczności jest taka sama jka na kompie?

[Mar_Dal]

Aniec jak ostatnio zachwalałem tego VPSa to teraz doprowadza mnie do szewskiej pasji. Po każdym większym harvescie muszę go wyłączyć i raz jeszcze odpalić bo wyskakują errory. Nie wiem co powoduje taką ilość błędów, ale jest to notoryczny błąd, powracający po każdym jednym harvescie.

Dużym plusem w tym wszystkim jest to, że baza adresów jaka została sharvestowana jest zapisana autmatycznie w odpowiednio wygenerowanym folderze, więc nawet jeśli zawiesi mi się przy 500k zebranych adresów - wszystko jest zapisane w pliku .txt

Aczkolwiek - bardzo upierdliwe.

Chodzi szybciej niż chodził mi Xss.

[aniec2]

@Mar a resetowałeś go?

@Djurek nie nie jest taka sama.... Bo to co robisz na tym serwie w 40 minut na kompie domowym/laptopie robisz w 2h.

[Mar_Dal]

Reset nic mi nie pomógł. Myślę, że błędy mogą powstawać w związku z kilkoma innowacyjnymi elementami jakie zostały wporwadzone do tego VPS'a, chociażby właśnie regularne zapisywanie harvestowanych plików, postowanych adresów.

[djurek]

@Mar a resetowałeś go?

@Djurek nie nie jest taka sama.... Bo to co robisz na tym serwie w 40 minut na kompie domowym/laptopie robisz w 2h.

A czy sprawdzałeś czy nie spada mu wydajność, bo 500 conections to 10 X więcej niż na kompie domowym jest zalecane, gdzie skuteczności jest dobra ale nie powalająca, mimo dobrych priv proxie

[Carnagge]

Ja sie wlasnie zastanawiam czemu aniec masz te drozsze serwery. Ja mam najtanszy pakiet i tam jak SB leci 100 polaczen to jest zuzycie ramu jakies 40MB i procek z 40%. Jak nawet zwiekszylem do 200 to te parametry sie jakos nie zwiekszyly. Jedynce co obserwuje to spadek skutecznosci, moze jednak jakby serwer byl lepszy to by to lepiej dzialalo.

[edit] Poza tym podejrzewam, ze na 500 polaczen to i tak lacze nie wytrzymuje, bo jest 100Mb, ale dzielone na wszystkich na jednej maszynie wiec relatywnie pewno kazdy ma po 10Mb jak nie mniej.

Edytowane 24 Lutego 2011 przez Carnagge

[djurek]

Tez sie zastanawiam na tej skuteczności, bo ustawiec 500 to ja moge u siebie na lączy 25 mb i kompie na i7, tylko wtedy drastycznie spada success.

[Mar_Dal]

Bo nie zależnie od maszyny i łącza ustawienie 500 połączeń jest bezsensowne.