GScraper - najszybszy harvester i dodawarka.

[blake]

lece blasta na te setki tysięcy WP'ków.

[ap_seo]

ma ktos pojecie przez co to moze zamulac?

mial ktos taki problem za a) zzera cholernie duzo zasobow

b.) mimo tego dziala co najwyzej kilkadziesiat polaczen - a wszedzie czytam o wartosciach powyzej 300...

i jeszcze ponowie pytanie: jak wyglada aktualnie sytuacja z odpinaniem? kiedy sie chce czy raz na 30dni?

[lumbo]

Raz na 30.

[Paweł Sokołowski - Eline]

@ap_seo - tak ja ci napisalem na PW problem lezy najprawdopodobniej w maszynie z ktorej postujesz. Uzyj podzielonych list zeby nie zabijac ramu i bedzie lepiej.

[ap_seo]

Raz na 30.

czyli co? jesli przenioslem na inny lepszy serwer a to nie przynioslo rezultatow to musze czekac 30dni?

[djurek]

v-line mam najdroższa wersje z gscscraperem i czasem zalogowac sie to wyczyn, wiec nie polecam pod gcs scrapera na maksa rozkręconego na postowanie.

[D_S]

Bo to nie jest program do postowania tylko do parsowania danych

[lumbo]

ap_seo tak.

[Mariusz]

Zrobiłem kilka testów postera, to samo puszczałem na GSc i SB.

Na dosyć sporych listach, za każdym razem skuteczniejszy był SB.

M

Bo to nie jest program do postowania tylko do parsowania danych

Jestem tego samego zdania.

Parser jest szybki i wydajny (dużo wyników), ale mało precyzyjny.

Idealnie nadaje się do "podładowywania" baz w takich programach jak GSA.

M

[ap_seo]

coz skoro nie jest to program do postowania to niech nie bedzie jako taki sprzedawany.

w moim przypadku na GS mam akurat wieksza skutecznosc(%dodan) tyle ze bywa ze juz przy 20watkach zuzycie ramu przekracza 1GB(!)

[lumbo]

Ap_seo nie chcę wymieniać programów tutaj promowanych jako dodawarki a nie nadających się do niczego za swoje ceny. Gscraper w połączeniu z ich proxy jest naprawdę wydajnym harvesterem. Można im wybaczyć jakieś niedociągniecia. Pozatym dla mnie używanie go jako dodawarka to strata czasu. Wole niech mi zbiera listy:)

[djurek]

Jaka predkośc jest optymalna aby CS sie wyrabiał i nie wieszał? Bo mam wrażenie że czasem chyba przez to zdarza sie mu paść

[Paweł Sokołowski - Eline]

@djurek - to zalezy od maszyny i typu captcha. Im dluzej rozwiazuje (co daje coraz wieksze zaleglosci) i im szybciej musi to robic (co zwieksza istniejace zaleglosci o nowe captcha) tym latwiej przestaje odpowiadac. Ja uzywam GS do dodawania w trybie 300 watkow i mam ustawiona jako OCR kombinacje CB/CS. Maszyna na jakiej dodaje do list zawierajacych okolo 1mln unikow to 2x3,4 + 4gb ramu.

BTW sa typy captcha i ustawien gdzie kilkadziesiat kolejkujacych sie dodan wywala OCR ;( Np dla ustawionego rozwiazywania recaptcha w CB mam sredni czas okolo 30sek.

[ap_seo]

nie wiem czy juz bylo, ale potrzebowalbym szybko wytlumaczenia opcji w Expand: Max links chceck count?

@wydajnosc mi sie zdarzalo na serwerze >3ghz , 2gb ramu ze mi dochodzilo zuzycie do 1,8gb mimo ze watkow mialem na pewno max 30, a raz chyba blizej 10... podejrzewam ze to wina zaspamowanego bloga byla ale mimo wszystko fajnie jakby zostalo to poprawione

[Paweł Sokołowski - Eline]

Wszystko jest pakowane do pamieci wiec pomysl o tym zanim zaczniesz dodawac. Ja robie tak ze przygotowuje listy z niskim OBL, ustawiam niskie timouty i w OCRach wylaczam wszystkie captcha ktore maja mala skutecznopsc a powoduja duze zuzycie zasobow. Ponawianie captcha mam ustawione na 0. Captcha ustawione do rozpoznania w CB/CS w zaleznosci od szybkosci OCRu dla danego typu.

Glowny problem pracy np z CS to zaznaczanie wszystkich typow captcha przez uzytkownikow i niech sie soft meczy, a wykorzytywana jest pewnie 1/50 typow dla postu