[startup] ProxyMarket.pl - szybkie proxy

[stat4seo]

@blake: wystarczyło robić na bieżąco. Jeżeli masz 8 aktualizacji "w plecy" to znaczy, że nie robiłeś ich od 2014 roku.

Poza tym, w sprawach Stat4Seo zapraszam do odpowiedniego tematu na tym na forum, bądź na maila: kontakt@stat4seo.pl.

 

 

[blake]

Mam taką zasadę, że jak działa to nie ruszam...

 

Ale dość sprawnie poszła aktualizacja. Ważne, że sprawdzanie ruszyło.

[ar4]

Mam taką zasadę, że jak działa to nie ruszam...

 

Ale dość sprawnie poszła aktualizacja. Ważne, że sprawdzanie ruszyło.

 

A dodatkowo masz wersję z dzisiaj, a nie jak stat stwierdził wersję z 2014

[blake]

No teraz już tak, bo przestało działać i trzeba było zaktualizować

[makauer]

Postaram się pokrótce posumować ostatnie wydarzenia.

 

Przed chwilą wysłany został do wszystkich (byłych i obecnych) Użytkowników ProxyMarket.pl mailing ze szczegółową informacją o ostatnich wydarzeniach. Myślę, że ma on o tyle istotne informacje, iż dotyczą one nie tylko działania samego serwisu ProxyMarket, ale również ogólnej sytuacji związanej z publicznymi proxy pod google. Podobnie jak w zakresie "pozycjonowania" również tutaj guglacz nie idzie nam na rękę i sytuacja ta zapewne w najbliższej przyszłości nie ulegnie zmianie. Chociaż z drugiej strony, jak sobie czasem z Darkiem rozmawiamy, gdyby chcieli, to już dawno kranik by zamknęli

 

Koniec końców sytuacja nie rysuje się w kolorowych barwach, ale na dziś jedziemy z koksem dalej

 

Poniżej zamieszczam treść mailingu:

 

Dzień dobry.

W ciągu ostatnich kilku dni na skutek działań Google doszło do znaczącego zmniejszenia liczby działających proxy pod google. Działania te dotyczyły proxy pod google wykorzystujących zapytania w formacie https. Z uwagi na fakt, iż dla takich właśnie zapytań następowała weryfikacja proxy w ProxyMarket.pl, ilość dostępnych proxy w systemie uległa drastycznemu obniżeniu, powodując utrudnienia zwłaszcza w sprawnym monitorowaniu pozycji. Wobec powyższego koniecznym było znalezienie "obejścia" dla tej sytuacji i wprowadzenia zmian w systemie.
Udało się znaleźć rozwiązanie problemów poprzez zmianę formy zapytania kierowanego do google na format http ze specjalnym operatorem blokującym przekierowanie na https (gws_rd=cr,ssl). Pozwoliło to uzyskać znacznie większą ilość proxy skutecznie odpytujących google.

Niestety działania google wymuszają wprowadzenie zmian nie tylko u nas, ale również i we wszelkich aplikacjach odpytujących google, w których chce się skutecznie korzystać z proxy. Polega ona na kierowaniu zapytań przez http z uwzględnieniem wspomnianego operatora. Przykład takiego zapytania:

https://www.google.pl/search?hl=pl&q=seo&start=0&gws_rd=cr,ssl

 

 

Oczywiście odpytywanie google po https lub http bez operatora (przekieruje wówczas na połączenie szyfrowane https) jest nadal możliwe. Jednak proxy, które są w stanie zrealizować to zadanie, jest znikoma ilość.

Jeżeli korzystają Państwo z monitora pozycji Stat4Seo, należny go zaktualizować, gdyż nowa wersja uwzględnia możliwość przeprowadzenia zapytania do google po http w odpowiedniej formie, podanej powyżej (skrypt pozwala również na odpytywanie google po wersji zapytania z https).
Jeżeli jednak wykorzystują Państwo proxy we własnych skryptach lub innych aplikacjach, niezbędne jest uwzględnienie zapytania w odpowiednim formacie.

Obecna sytuacja w świecie proxy pokazuje jednoznacznie, iż google zaczęło poświęcać tej materii szczególnie dużo uwagi, co poważnie wpłynęło na ograniczenie ilości działających pod google serwerów proxy.
Jednocześnie pragnę zaznaczyć, iż jest to sytuacja od nas kompletnie niezależna. W każdym podobnym przypadku będziemy starali się znajdować kolejne "obejścia" do zapewnienia jak najlepszego działania usługi.

 

Z poważaniem
ProxyMarket.pl

 

 

Podziękowania za pomoc kieruję do Darka (Miona) za cudną dekompilację i Łukasza (stat4seo) za szybkie wydanie aktualizacji do S4S

 

Pozdrawiam i życzę nam wszystkim spokojnego wieczoru.

[Mion]

Koniec końców sytuacja nie rysuje się w kolorowych barwach, ale na dziś jedziemy z koksem dalej

Te barwy są całkiem niezłe - zielone, bo 23 miliony URL wyciągnięte na proxy z PM :

 

 

Co prawda wytrwałemu żniwiarzowi zajęło, to 18 godzin, ale nie było pośpiechu. Produkcyjny Test odbył się wykorzystaniem pakietów proxy z PM oraz VPS Windows z firmy Astrovm.net.

 

---

PS użytkownicy wytrwałego żniwiarza mogą pobrać aktualną wersje 1.1.1.0 ze stałej lokalizacji która ma pewne zmiany sądząc po wynikach raczej pozytywne.

 

 

[omega107]

Jak wygląda sprawa z proxami aktualnie? Będzie proxy market jeszcze sprzedawał proxy?

[makauer]

ProxyMarket.pl sprzedaje proxy cały czas, chwilowo wyłącznie anonimowe.

 

Na dniach jednak sytuacja powinna ulec zmianie. Dzień i noc nad tym pracuję.

 

Pozdrawiam.

[Mion]

Na dniach jednak sytuacja powinna ulec zmianie. Dzień i noc nad tym pracuję.

Dobra wiadomość, bo nie ma się, co tak szybko poddać! Jednak polecam pracę w dzień, a w nocy wypoczynek przynajmniej dala czynnika ludzkiego. Oprogramowanie może pracować całodobowo

[Mion]

I jak tam w "chlewie z prosiakami" PGR 2.0?

[makauer]

 

Trzódka jeszcze kwiczy, ale nie leży

 

Jest lepiej, bo stabilniej. Sprzedaż wznowiona.

[Mion]

Działajcie, działajcie, bo te proxy nadal pozwalają na harvestowanie, co prawda nie z taką szybkością jak kiedyś, ale "ziarnko do ziarnka aż zbierze się miarka".

 

Dla porównania testowałem harvestr na proxy prywatnych kupionych w dostępnych serwisach online ... Na początku była zielona łączka ... ale w pewnym monecie zapaliło się czerwone światło i .... i tak już zostało postęp harvestowania 0. Nie sprawdzałem jeszcze z "ożywaniem", ale dla porównania na tych z PM, co jakiś czas pojawia się zielone światło i jest progres.... Tylko trzeba być wytrwałym

[blake]

No to już wiem dlaczego od 3 dni znowu jest lipa z prosiakami. Znowu przykręcili żywotność a dorzucając do tego harvestowanie na nich to już ogólnie lipa się robi.

[Oxan_20]

Ja nie wiem czy to nie jest coś przypadkiem konkretnie ze sprawdzaniem pozycji. Harvestowanie na publicznych działa b. dobrze (nie wiem jak z proxymarket bo nie korzystam), ale sprawdzanie pozycji już klapa. Tak samo na prywatnych, sprawdzając ręcznie pozycje w przeglądarce, mam wrażenie jakby znacznie szybciej wyskakiwała captcha.

[Mion]

Ale harvestowanie polega na zapytaniach do wyszukiwarki i wyciąganiu danych.

Sprawdzanie pozycji an tym samym.

 

Wiec różnica może być spowodowana:

- wykorzystanymi operatorami wyszukiwania. Zbyt dużo w jednym zapytaniu i IP proxy od razu ma bana;

- specyficzna obsługa w programie sprawdzającym pozycje.