[startup]Monitoring pozycji/Panel klienta - Stat4Seo.pl

[stat4seo]

@MaxPan: to co, polecisz jakieś konkretne łamacze do captch ? Tu czy na PW. Sprawdzę na ile to trudne i może uda się to zaimplementować w rozsądnym czasie.

 

 

ps. odpowiadam na twoje ew. pytanie - tak, krótszym niż 3 lata 

[MaxPan]

Dałem na PW nr GG do siebie, aby nie zaśmiecać tematu, Szczyrze uważam, że dla Ciebie to 2-3h kodowania. API jest proste jak budowa cepa.

[darkman]

1. CapMonster2 w wersji profesjonalnej kosztuje $97 rocznie ($8 usd miesięcznie). Userowi bardziej będzie opłacać się kupić prywatne proxy, a dostawcy "filantropowi" albo firmie docelwej jeśli już, to implementacja webowego OCR'a. Kto zapłaci za koszt impelemntacji i API? Oczywiście end-user, więc jest to rozwiązanie nieekonomiczne :-)

Ja wiem, że Ty wiesz, że można wysyłać requesty z linuxa na wirtualkę i wszystko będzie działać, ale po co, skoro jest to rozwiązanie, które się nie kalkuluje. Już widzę jak wprowadza to dostawca X ku uciesze dostawców Y i Z i całej gawiedzi użytkowników scrapeboxa :-)

2. Zgadzam się, ale tylko w przypadku proxy z botnetów albo skanów, przy czym jest to rozwiązanie nieekonomiczne :-) Jak kogoś stać na wynajem/zakup proxy z botnetów albo generowanie/kupienie listy ze skanu, to będzie ich używał tylko do swoich, czytaj innych niż harwestowanie celów. Upublicznienie takich serwerów w dowolnej formie, tj. darmowej czy płatnej automatycznie odbiera im status "ekskluzywności" - prywatnymi na pewno nie można ich nazwać, o czym w punkcie3 :-P

3. Każde proxy bez autoryzacji (ip/hasło etc), które przyjmuje połączenia na otwarty port jest i zawsze będzie proxy publicznym. Nie ma tu żadnej różnicy czy serwer taki widnieje na publicznej/płatnej liście czy pochodzi ze skanu. Skoro Sergiej ma do niego dostęp, to Xaoho i Janek też go zdobędą - jeden zapłaci, a drugi sam przeskanuje, przy czym tak jak dla 1 i 2 - jest to rozwiązanie nieekonomiczne :-)

 

Dziękuję za uwagę i na ewentualne kontrargumenty odpiszę jutro, bo dzisiaj wyczerpałem już swój limit postów lol

[MaxPan]

Twoje argumenty maja sens jak najbardziej, może  z przyzwyczajenia ale w harwestrach mam włączony OCR (jest już tam zaimplementowany) nie widzę żebym wydawał majątki, na pewno harwest idzie szybsze to bez dwóch zdań, ale czy to opłacą się to zgodzę się kwestia dyskusyjna. Dla mnie szybsze to znaczy opłacą się

[Carnagge]

Mnie w ogóle dziwią chłopaki Wasze dywagacje - tym bardziej, że w większości się zaawansowani użytkownicy wypowiadają. Nie wiem po co używacie jakiś dziwacznych proxy. Może faktycznie jak ktoś ma tyle fraz, co blake to musi szukać takich rozwiązań, ale przy sensownej ilości fraz to najlepiej samemu postawić proxy.

VPS pod proxy można dorwać za 30 zł rocznie - tak powtórzę trzydzieści zł rocznie (najtaniej nawet miałem za 20 zł - jakieś $5). Instrukcja jak postawić proxy jest tutaj na PIO. Sam mam tak postawione i mam własne proxy, bez dzielenia z nikim. Wszystko śmiga sprawnie i przyjemnie, a co najlepsze jest to pewno tańsze od tego Waszego kupowania jakiś publicznych czy niby-prywatnych proxy. Wtedy można sobie przeskalować ile takowych vps'ów potrzeba. Na dwóch można sprawdzić ok. 500 - 1k fraz na dobę.

 

Ponadto każdy kto ma vps'a na windowsie pod spamiarki w 2min może zainstalować programik i odpalić proxy.

 

[edit] ten program pod vps z windowsem to ccproxy

Edytowane 6 Marca 2016 przez Carnagge

[Mion]

Generalnie polecamy serwis https://proxymillion.com.

Znajomy kupił i .... k***ć  25 proxy na tym samy IP tylko różnią się portem od 10001  / 10025      !

[MaxPan]

Znajomy kupił i .... k***ć  25 proxy na tym samy IP tylko różnią się portem od 10001  / 10025

 

Bo to tunel, po za nim ich proxy, wiele firm tak robi. Wjazd w tunel zazwyczaj przywiązany po IP lub po ilości wątków. Każdy port tego samego IP kieruje już na właściwe proxy. Korzystam z jednego takiego rozwiązania i jestem zadowolony.

[makauer]

Ładnie guglacz z nami się bawi

Raz https lepiej praży, innym razem http.

Niestety wszystko zależy od tego, które pasmo jest bardziej obciążane. Http ostatnio odpoczywało po niedawnym wycisku, to teraz ma się lepiej:

 

 

Brakowało mi juz tego ZIELONEGO

 

 

Jest lepiej, ale ciężko mi uwierzyć, że nie jest to zmiana na stałe. Przy czym jakiś czas się już utrzymuje.

 

Odnośnie tych zawirowań http<==>https chłopaki z Proxygen wykminili fajną kwestię, która ułatwi życie użytkownikom Web-Tools i Stat4Seo - Marek i Łukasz już to wdrażają

 

 

[kamilp7]

kosz

Edytowane 18 Marca 2016 przez kamilp7

[MKucinski]

Macie jakieś problemy ostatnio lub rozwiązanie mojego dla mulącego stat4seo?

Monitoruję ponad 3k fraz i ~200 stron, po ostatnich problemach z proxy mam 3 pakiety (proxymarket, proxygen, proxylive), łącznie tych prosiaków trochę jest (około 100).

Mimo wszystko stat4seo sprawdza ostatnio strasznie wolno. Pomaga ręczne wywoływanie crona, ale wówczas stat się nie ładuje (oraz inne rzeczy na serwerze). Ręczne wywołanie crona np. o 8 powoduje, że do 12 stat jest bezużyteczny, a sprawdza tak czy siak tylko ok. 30-40% fraz

 

Serwer to mydevil.net w wersji MD1 (jest tam stat4seo + miniswl).

 

Co zrobić, jak żyć?

[Anmato]

Ma ktoś inne proxy odporne na zarzynanie przez Stat4Seo? ProxyMilion mają problemy z zarabianiem pieniędzy.

[makauer]

Możesz spróbować naszych prywatnych:

https://prywatne.proxymarket.pl/googlepriv.php

Zastanawiam się tylko co masz na myśli pisząc "odporne na zarzynanie przez Stat4Seo"? Przy odpowiednich ustawieniach skryptu i odpowiedniej ilości proxy możesz swobodnie monitorować swoje frazy. Ciężko mówić o proxy bardziej bądź mniej odpornych na bany ze strony google. Jak są współdzielone to padną szybciej, jak tylko Ty z takiego proxy korzystasz, to każde IP/proxy podlega takim samym regułom gry i za takie samo działanie otrzymać może blokadę tak samo szybko. Ważne jest co i jak się robi.

 

Oczywiście są też narzędzia, które przez swoją "logikę" działania mogą przyspieszać nałożenie blokady, ale Stat4seo do nich bym nie zaliczał.

[Zbigniew]

Zaobserwował dziś ktoś jakieś problemy ze Stat4seo? mi system nie zdążył sprawdzić jeszcze ani jednej frazy i nie wiem czy nawala dostawca proxy, czy znowu google coś pozmieniało ;-)

[MKucinski]

https://www.forum.optymalizacja.com/topic/142775-startup-proxymarketpl-szybkie-proxy/?p=1489162

[Zbigniew]

Niestety https nic nie zmienia u mnie ;-)