Google queries + cURL

[symetryk]

function connect_curl($url, $post='')

{

$curl = curl_init();

curl_setopt($curl, CURLOPT_URL, $url);

curl_setopt($curl, CURLOPT_FOLLOWLOCATION, 1);

curl_setopt($curl, CURLOPT_TIMEOUT, 30);

curl_setopt($curl, CURLOPT_HEADER, 0);

if(strlen($post)>0)

{

curl_setopt($curl, CURLOPT_POST, 1);

curl_setopt($curl, CURLOPT_POSTFIELDS, $post);

}

$strona = curl_exec($curl);

curl_close($curl);

}

https://tech.bigu.pl/podstawy-curla-w-php/

Mam taki skrypt do obsługi cURLa. Niestety zmienna strona zwraca stronę google:

"we're sorry but your query looks similar to automated requests from a computer virus or spyware application bla bla bla..."

Jak to obejść

[noone]

Zmienić IP serwera, z którego odpytujesz google i najlepiej odpytywane DC.

Pobieranie treści z google nie jest takie łatwe i taki skrypcik to trochę za mało. Przede wszystkim dołóż UA i losowy czas sleep między zapytaniami. Przydałoby się jeszcze kilka proxy...

[symetryk]

Dzięki Noone jeśli tak to za dużo zachodu - przechodzę na yahoo!

[jez]

Dla osób pobierających dane z wyszukiwarki, stworzono API.

Każda wyszukiwarka stara sie bronić przed (jak by na to nie patrzeć) kradzieżą produktów technologii.

Pozdrawiam, J.