Skąd bierzecie serwery proxy?

[breja]

livenet.pl 255ip za 250 rocznie

w kimsufi.pl popatrz tez na ceny bo tam oplata jednorazowa tylko (plus dedeyk+pakiet prof obowiazkowo)

[Łukasz Gugała]

Hmm oferta livenet.pl kusząca, ale nigdzie nie widzę niestety informacji o IP.

Co do kimsufi,oni chcą za 256 IP 1100 zł

[breja]

1100 jednorazowo to nie jest duzo co do livenet to tez nie widzialem w cenniku ale to wyczytalem niedawno na jakims forum wiec trzeba by to zweryfikowac. Zazwyczaj cena to 3zl/1euro/1$ miesiecznie wiec te oferty i tak sadobre. Jeszcze taniej mozna zdobyc pewnie u wiekszych operatorow sieci lokalnych :-) ale trzeba wlasna maszyne wstawic do ich serwerowni no i lacza 100Mb to nie dadza jak ovh !!!

[Łukasz Gugała]

Nic, narazie parsuję listy proxy, tzn. jeszcze nie, ale juz połowa zrobiona - kilka URL'i z listami proxy, wydłubanie z nich adresów, jakieś tam sprawdzanie czy działa i próbuję wyskubać te najlepsze. Do monitorowania 700-1000 fraz kilkadziesiąt proxy wystarczy.

Jak to się nie sprawdzi, skorzystam z ProxyBonanza.com z kilku dedykowanych IP, a jesli chodzi o transfer to się można ponoć dogdać.

Dzięki za rady, jak się czegoś dowiem i wypróbuję to dam znać.

[breja]

eee tylko 1k fraz to bez proxy ;-) zakladajac ze pytanie raz dziennie wychodzi po 40 zapytan na godzine a to napewno nie bedzie ban jak bedziesz odpytywal rozne DC :-)

[garyoldman]

A to nie jest tak, że powinno się właśnie przypisać DC do danej domeny którą monitorujemy? Aby o daną domenę odpytywać zawsze to samo DC (ustalone np. z klientem w umowie) co zapobiega skokom związanym ze zmianą DC... wtedy robisz tak jak pisze breja...

[Mion]

OT: Co za klient podpisze ci umowę na pozycjonowanie na określone DC

Korzystając z publicznych list proxy musisz je na bieżąco

- monitorować czyli pobierać;

- te już pobrane sprawdzać czy nie mają bana wykonując za ich pośrednictwem jakieś żądanie do google.

Te operacje były by efektywniejsze gdyby php obsługiwał wielowątkowość, a tak nie jest. Wiec albo pisać program w C/C++ który będzie takie zadanie na serwerze wykonywał, albo akcje z cron'a jeden pobierający listę proxy, a drugi sprawdzający ich zbanowanie i tak 24H

[Łukasz Gugała]

eee tylko 1k fraz to bez proxy ;-) zakladajac ze pytanie raz dziennie wychodzi po 40 zapytan na godzine a to napewno nie bedzie ban jak bedziesz odpytywal rozne DC :-)

Mam troszkę więcej rzeczy do odpytywania, nie tylko Google ma limity, mają je także np. Yahoo czy Bing, a je też odpytuję. Po prostu chce mieć mozliwość wyciągnięcia z sieci wszystkich potrzebnych mi informacji w dowolnym czasie.

@Mion - tak własnie będzie to robione. Jeden pobiera. Drugi sprawdza. A trzeci monitoruje i doszukuje się niedopatrzeń.

A to nie jest tak, że powinno się właśnie przypisać DC do danej domeny którą monitorujemy? Aby o daną domenę odpytywać zawsze to samo DC (ustalone np. z klientem w umowie) co zapobiega skokom związanym ze zmianą DC... wtedy robisz tak jak pisze breja...

Słyszałem o takich działaniach, ale jakoś już o takie dokłądnie rzeczy nie będę się troszczył - pozycja to pozycja, jak strona dobrze pozycjonowana to wahania są nieznaczne.

[garyoldman]

OT: Co za klient podpisze ci umowę na pozycjonowanie na określone DC

Pozycjonowanie na jedno DC? Nie napisałem czegoś takiego a po drugie to dobrze wiesz, że to w praktyce nie możliwe... Więc nie pisz czegoś co z moich ust nie padło... Piszę o monitorowaniu pozycji na danym DC między innymi po to aby nie było potem nieporozumień, że klient widzi inne wyniki niż Ty (pomijając personalizację) i nie robił problemów.

A swoją drogą to też zapewne wiesz, że jest wielu klientów co potrafi podpisać naprawdę przeróżne cuda... Kilka wątków na forum się przewijało na ten temat... a praktyka jaką podałem często ma miejsce.

A do autora tematu... jeżeli jesteś w stanie ponieść koszta to bierz IP-ki, można przecież zrobić z nich jeszcze inny pożytek a nie tylko odpytywać Googla;)

[Ptaq]

Piszę o monitorowaniu pozycji na danym DC między innymi po to aby nie było potem nieporozumień, że klient widzi inne wyniki niż Ty (pomijając personalizację) i nie robił problemów.

W bardzo wielu wątkach przewinęło się też to, że 2 osoby mogą odpytywać to samo DC i widzieć różne wyniki

To, że odpytujesz dane DC - nie znaczy, że z niego otrzymujesz odpowiedź. Tak więc odpytywanie konkretnego DC - raczej nie ma sensu.

[Łukasz Gugała]

Ptaq, może podpowiesz skąd seo-stat.pl bierze proxy ?

[Mion]

Na pewno taka ilość DC ma na celu rozłożenie ruchu. Wiec pada pytanie czy faktycznie wykonywanie żądań do konkretnego DC zliczane jest a tym DC czy też globalnie. Z tym google to do końca nic jednoznacznie nie jest jasne

[garyoldman]

@Ptaq

Okej musiałem takowe wątki przeoczyć... Geolokalizacja też robi swoje pewnie w tym zagadnieniu... czy inne ich cuda, ale dobrze wiedzieć... Potestuje

No to okej, ale wracając do tych różnych DC skoro nie zależy Ci na tym co pisałem to czemu nie zrobić sobie bazy kilkudziesięciu DC Googla, Yahoo i Binga i naprzemiennie w pętli je odpytywać albo losowo? Wtedy ilość potrzebnych serwerów proxy czy IP zmaleje znacząco... Czy zauważyłeś iż takie różnicowanie odpytywanych DC nic nie daje?

No i już pomijając tych klientów co by się Mion nie uczepił, bo przecież nie tylko chodzi o monitorowanie pozycji ale i statystyki do naszych potrzeb co stanowi zapewne większość Twoich zapytań.

[Łukasz Gugała]

Ale odpytując poprzez host tj. google.com dostajemy dane z losowego IP Google'a, więc to losowanie DC chyba jest juz wykonywane automatycznie w ten oto sposób. Poprawcie mnie, jeśli się mylę.

[Ptaq]

Ptaq, może podpowiesz skąd seo-stat.pl bierze proxy biggrin.gif ?

Wbrew pozorom seo-stat.pl ma "niewiele" proxy jak na tyle userów, a wynika to z tego - że udało nam się poprzez testy dojść nawet 2000 odpytań google z jednego IP w ciągu doby. Dodatkowo mamy pewien sposób to taka "innowacja" - która oszczędza nam wykorzystanie proxy, nie chce za dużo mówić bo konkurencja nie śpi A my dzięki naszym rozwiązaniom - nie musimy mieć za dużo proxy a co za tym idzie mniejsza cena kont premium jest.

Z drugiej strony mamy w sumie nie duży ale zawsze zastrzyk proxy od userów - dzięki temu mają większe konta, a my mamy dodatkowe proxy.

Reasumując - warto popracować nad techniką odpytywania - dzięki temu można naprawdę BARDZO dużo sprawdzić z 1 IP

Co do losowych DC - to tak jak napisał Gugsen - wystarczy odpytywać np. google.pl i poprzez to zapytania rozchodzą się na różne DC.