APi_proxy setki proxy dziennie prawie za darmo :)

[mlody0072]

Witam Wszystkich

Ostatni czas poświęciłem na stworzenie aplikacji o nazwie APi_proxy poniżej opis.

Aplikacja umożliwia pobieranie proxy z rożnych źródeł następnie są testowane pod względem działania w Google, MajesticSEO i czy zwracają w ogóle kod HTTP 200. Według testów które trwały trochę czasu możemy mieć nawet 300-400 proxy wykonujących zapytania do google. Dzięki możliwości pobierania podstron serwisów z których pobierane są proxy aplikacja przeszuka wszystkie linki znajdujące się na stronie i pobierze tyle adresów proxy ile to możliwe.

Aplikacja ma bardzo dużą wydajność nawet do 5000 adresów proxy na minutę (więcej nie testowałem). Zalecana wartość to 2000-3000 proxy na minutę co daje i tak przyzwoite wyniki 180 tys adresów sprawdzanych na godzinę.

Aplikacja była instalowana na serwerach vps:

- biznes-host.pl (vps)

- minthost.pl (vps)

- vipower.pl (vps)

- vmline.pl (vps)

Powinna działać praktycznie na każdym aby spełniał poniższe wymagania

Wymagania:

- PHP5.3,

- MySQL,

- Crontab co 1 minutę,

- Moduł file_get_contents,

- Moduł cURL,

- Biblioteka IonCube,

- Najlepiej nielimitowany transfer na serwerze

Jako, że aplikacja wykonuje bardzo dużo zapytań na minutę zalecany jest serwer VPS nawet

najtańszy, można skonfigurować aplikację aby działała stabilnie także na serwerach współdzielonych

ale nie gwarantuje że administrator nie zablokuje takiego konta z powodu większego obciążenia.

Zdjęcia oraz instrukcja obsługi znajduję się na stronie https://sklep.piersa....ania-list-proxy

Wkrótce uruchomię uruchomię demo aplikacji.

Jeśli chcesz przetestować aplikację napisz przez formularz kontaktowy podając adres instalacji aplikacji, na samym początku wiadomości napisz "TEST APi_proxy"

Dla posiadaczy moich innych aplikacji przewidziane są rabaty.

Ma aplikację wystawiam fakturę VAT.

Screen z USM przed chwilo sprawdzone proxy z systemu:

[bananasltd]

cena: 221pln? czyli około 66$ - czy to jest lepsze od Xeon'owego pobieracza/sprawdzacza proxy?

[MaxPan]

  Cytat

czy to jest lepsze od Xeon'owego pobieracza/sprawdzacza proxy?

Na razie XPCP nie testuje proxy pod Google, bo harvestuje głownie w innych wyszukiwarkach oprócz Google i ta opcja nie była potrzebna. Oczywiście została zgłoszona do autora i ma się pojawić w kolejnym update.

Co do softu Młodego to jeszcze nie testowałem. ale z tego co widzę testuje proxy pod MS i Google to logicznym jest wykorzystanie softu w parze z Webminitorem i softami monitorującymi pozycje stron.

[mlody0072]

Nie testowałem XPCP ale Max wie chyba co mówi, lecz XPCP nie ma chyba możliwości tworzenia API dla proxy no i mój jest w pełni bezobsługowy.

@bananasltd napisz do mnie na maila to dam Ci licencję na testy i zobaczysz czy lepsze czy nie.

Soft był napisany ogólnie dla współpracy z WEBmonitorem ale proxy nadają się także do innych aplikacji na przykład DonLinkAge. Nieraz mam tyle proxy, że mogę spokojnie nimi handlować

Max a co Ty Moderator ? Gratulacje a może i współczuję Odezwij sie do mnie na GG to Ci dam licencje na soft do testów.

[MaxPan]

XPCP wysyła na hosting listy i może ich kodować problem taki że odkodować może tylko XseoN, a wysłanie otwartym plikiem .txt to zły pomysł bo każdy może z takiej listy korzystać wystarczę znać URL.

Pomyśli o zabezpieczeniu samego API z poziomu aplikacji.

[mlody0072]

U mnie API jest zabezpieczone IP podajemy do 12 adresów IP które mogą z niego korzystać, możemy stworzyć dowolną ilość pakietów API oddzielnie dla proxy działających pod Google, MajesticSEO i HTTP 200.

Dodatkowo jak wszystko bedzie hulać dobrze u wszystkich wprowadzę parę udogodnień i ulepszeń.

[piotr.k]

  W dniu 3.09.2013 o 07:04, mlody0072 napisał(a):

Soft był napisany ogólnie dla współpracy z WEBmonitorem

Czy mi się wydaje, czy Webmonitor miał to wbudowane?

Chyba, że coś źle zrozumiałem...

[cinmar]

  Cytat

Czy mi się wydaje, czy Webmonitor miał to wbudowane?

Ma wbudowane ale nie ma takiej wydajności i szybkości w sprawdzaniu proxy to raz, dwa brakowało sprawdzania dobrych proxy co x minut, trzy masz API dla poszczególnych typów proxy. Moim zdaniem najlepiej wziąć aplikacje na testy bo autor daje taka możliwość.

[mlody0072]

Webmonitor nie ma takiej wydajności bo nie do tego został stworzony i by potrzebował dobrego VPS'a aby można było obrabiać taką ilość danych chodzi mi o dane ze stron i sprawdzanie proxy. WM sprawdza 10 proxy na minutę

[piotr.k]

ok, w takim razie Adam powinien mocniej zaakcentować różnice (z naciskiem na korzyści) z API dla osób posiadających Webmonitor

[Xemix]

Od wczoraj testuję aplikację i powiem, że jest OK, na prawdę dobry soft. Zainstalowałem na VPS, działa poprawnie - ustawiłem sprawdzanie 2000 proxy / minuta (przy większych ilościach na VPS z 1 GB RAMu zaczyna mulić). Zgłosiłem autorowi kilka sugestii, zostały rozpatrzone.

[Przemo32]

_{Jaj sprawuje się program ile ile mącie działających prosiaków.}

[blake]

No właśnie coś mi się wydaje, że nie działa tak jak powinien. Wrzuciłem wczoraj 2,5k źródeł, do teraz przez ponad 24h nie pobrał nic z ponad 800. To, że nie pobrał to akurat mało istotne, chodzi o to, że nawet na nie nie wszedł, bo pobierać nie musiał jak by nie było, ogólnie pokazuje ponad 200 działających i w większości działają, martwi mnie tylko to pobieranie ze źródeł.

[mlody0072]

Co ile czasu odpytujesz źródła proxy ? Ja u siebie ustawiam co 4-6 godzin czas jest optymalny i tak blogi z prosiakami są aktualizowane raz na 24h. Jednak przyznam się, że pobieranie proxy nie jest do końca zoptymalizowane i dlatego się zawiesza w pewnym momencie przetestuje to dokładnie i zrobię poprawkę tak aby śmigało szybko.

W sprawie ilości proxy to nie będę się mocno wypowiadał bo pewnie wydam się mało wiarygodny jako autor (ale mam tyle samo proxy co PM a czasem nawet więcej)

[blake]

Miałem ustawione co 3, więc może to było tak, że nie zdążył pobrać ze wszystkich i zaczynał od nowa po 3 godzinach, zmieniłem teraz na 12, zobaczę co się będzie działo i napiszę.

Coś jest nie tak z usuwaniem źródeł, chciałem usunąć te z których nic nie pobiera a już je sprawdzało, zaznacza i dostaję komunikat, że nic nie zaznaczyłem jak chce usuwać.