Skocz do zawartości

Pobieranie wyników z google - ile proxy potrzeba?


potas119

Rekomendowane odpowiedzi

@UP - scrapebox ma limit pobrań o jakim mowa w  "pierwszych 100 wyników dla 200 różnych keywordów." ?

HTTP 200 usługi IT -> Dariusz Janicki | Realizacja serwisów www oraz oprogramowania w PHP / C# / Golang / Node.js / MySQL/ Laravel
Komory normobaryczne - normobaria.tech Wykonawca montażu i instalacji komory normobarii

Odnośnik do komentarza
Udostępnij na innych stronach

Apropo proxy i zapytań do G ... szybkość nałożenie blokady na IP zależy również od typu zapytania. np wczoraj szukałem coś tam związanego wordpress'em i pluginami, więc w każdym  zapytaniu było wordpress i już po chwili miałem okienko na token :olaboga:

HTTP 200 usługi IT -> Dariusz Janicki | Realizacja serwisów www oraz oprogramowania w PHP / C# / Golang / Node.js / MySQL/ Laravel
Komory normobaryczne - normobaria.tech Wykonawca montażu i instalacji komory normobarii

Odnośnik do komentarza
Udostępnij na innych stronach

Kilka tipów:

1. Proxy powinno być jaknajwięcej.

2. Tak jak mówi Mion, są zapytania, które powodują od razu wyskoczenie captchy - musisz dowiedzieć się jakie.

3. Kolejność wyszukiwań ma znaczenie - tak jak mówi Mion wyszukiwarnie "Powered by Drupal" "a" potem "powered by drupal" "b" jest traktowane właśnie jako harvestowanie wniosek jest z tego jeden, mam nadzieję, że wiesz jaki.

Odnośnik do komentarza
Udostępnij na innych stronach

Ossstatnio :glaszcze:  G banuje już od dawien dawna.

HTTP 200 usługi IT -> Dariusz Janicki | Realizacja serwisów www oraz oprogramowania w PHP / C# / Golang / Node.js / MySQL/ Laravel
Komory normobaryczne - normobaria.tech Wykonawca montażu i instalacji komory normobarii

Odnośnik do komentarza
Udostępnij na innych stronach


Google ostatnio banuje proxy na maxa więc trzeba

 

MaxPan ostatnio banuje zbieraczy postów na maxa, więc trzeba uważać.

Panie Boże, chroń mnie przed debilami, bo rozmowa z nimi powoduje, że  grzeszę pychą..

Były sobie świnki trzy - content, google oraz link | jestem uczulony na pierd*lenie głupot | idiot intruder aka internetowy poszukiwacz prawdy 

Odnośnik do komentarza
Udostępnij na innych stronach

@Maxiu, "Na bezrybiu i rak ryba" :)

Panie Boże, chroń mnie przed debilami, bo rozmowa z nimi powoduje, że  grzeszę pychą..

Były sobie świnki trzy - content, google oraz link | jestem uczulony na pierd*lenie głupot | idiot intruder aka internetowy poszukiwacz prawdy 

Odnośnik do komentarza
Udostępnij na innych stronach

Zarchiwizowany

Ten temat przebywa obecnie w archiwum. Dodawanie nowych odpowiedzi zostało zablokowane.

  • Ostatnio przeglądający   0 użytkowników

    • Brak zarejestrowanych użytkowników przeglądających tę stronę.
×
×
  • Dodaj nową pozycję...

Powiadomienie o plikach cookie

Umieściliśmy na Twoim urządzeniu pliki cookie, aby pomóc Ci usprawnić przeglądanie strony. Możesz dostosować ustawienia plików cookie, w przeciwnym wypadku zakładamy, że wyrażasz na to zgodę. Warunki użytkowania Polityka prywatności