Dobry parser wyników google

[Kesera]

Czy ktoś mógłby polecić jakiś dobry parser do wyciągania wszystkich URLi z SERPa? W sieci samo badziewie znajduję.

[Mion]

Jasne bardzo dobre parsery są funkcje z grypy preg_match* https://www.php.net/manual/en/ref.pcre.php reszta należy do ciebie

[Kesera]

Miszczu, o jakie grypy ci chodzi, a poza tym pytałem się o gotowy parser a nie funkcje.

[Mion]

Gotowy to musisz sobie napisać samemu na bazie tej grypy, bo parsery nie występują na lewo i prawo tak jak szablony do WP

[it_management]

Czy cena $70 Ci odpowiada ? Jesli tak moge fajne narzedzie Ci polecic.

[PawelC]

Przeczytaj sobie podstawy php i taki parser bez problemu napiszesz, no chyba, że wolisz zainwestować trochę kasy w gotowy, ale to już Twoja sprawa Mion podał Ci bardzo dobry link teraz tylko poszukaj przykłady jego zastosowania

[Kesera]

Za $70 to ja kupię całego ultraedita, wyciągnę URLe w sekundę + masę innych rzeczy i jeszcze na skrzynkę piwa zostanie.

[Mion]

@Za $70 to ja kupię całego ultraedita

I co w związku z tym

[Sylwin]

kod zagadka

preg_match_all('[<h3 class=r><a href="(.+?)"(.+?)>]is',$kod_strony,$wynik);

kod zagadka

;D

[Dextii]

To mi tylko powiedz jak dostać $kod_strony ;p bo przez file_get_content z samym podmienionym q=xxx już nie będzie ;p

[megauser]

CURL wraz z FOLLOW_LOCATION

[sorrow]

ja proponuje prostą metodę:

Wchodzi w Google ustawiasz w konfiguracji wyświetl po 100

następnie jak masz Firebuqa lub w konsoli wpisujesz coś takiego:

links = document.getElementsByClassName("l");

var wsa = '';

for(var i = 0; i < links.length; i++) {

dsa = links.href.replace(/https:\/\//,'').replace(/https:\/\//,'');

//dsa = dsa.substr(0, dsa.indexOf("/"));

wsa = wsa + dsa + "<br>";

}

document.body.innerHTML = wsa;

I Pojawia się na stronie adresy linków:

[Dextii]

przez file_get_content zrobiłem, tylko trzeba było ubogi link znaleźć

https://www.google.pl/search?client=opera&rls=pl&q={$key}&sourceid=opera&ie=utf-8&oe=utf-8&channel=suggest

[megauser]

Pewnie zaraz przestanie działać, bo google wykryje zautomatyzowane zapytania (brak nagłówków, etc) i będzie chciało abyś kod wpisał. :-)

[zoreander]

Czasem nie chodziło Ci o "scraper" ?

np. https://sickmarketing.com/forum/showthread.php?t=4816

Jak parser to polecam Pythona i lxml .