Wylistowanie wszystkich url-i zaindeksowanych przez google

[Maxximilian]

Jest jakiś sposób / narzędzie które pozwala na wylistowanie wszystkic adresów z domeny zaindeksowanych w google?

[marcin_dance]

wylistowanie wszystkic adresów z domeny zaindeksowanych w google?

wow

WYLISTOWANIE

BARDZO PODOBA MI SIE TEN WYRAZ

ale nie znam takiego sposobu, czyli chodzi ci o to by poznać co gugl zaindeksował..hmm myslę ze to sporo czytania

[lojtas]

Ciekawe przedsięwzięcie, tym bardziej, ze strony ciągle wchodzą i wypadają z indeksu.

[Maximus Marius]

Google Webmaster Tools choć i to nie jestem pewien czy podaje wszystkie dane

A poza tym autor watku pytał sie o domenę a to podaje dla jednego hosta w domenie.

[Lind-Lau]

Ja jak chece wylistować adresy zaindeksowane przez googl to uzywam

site:nazwa_domeny.com

ale może źle zrozumiałem pytanie

[tatar111]

wylistowanie wszystkic adresów z domeny zaindeksowanych w google?

Też tak zrozumiałem, że o site chodzi.

[Maxximilian]

Panowie bądźcie poważni - to ja sam wiem więcej - jest opcja via wyszukiwanie zaawansowane wyświetlania co google dodał do indeksu własnie w ciągu jakiegoś okresu czasu ale wychodzą bzdury np. 229 stron w ciągu ostatniego tygodnia a dodał 30000.

Problem mam taki - załozyłem 3 miesiące temu tagi noindex nofollow dla szeregu struktur url-i w celu wyeliminowania nakładających sie stron a tym samym filtra dc na te strony (kilka razy zmieniałem spoób przepisywania url-i) i wyjadania transferu przez roboty. Ilosć zaindeksowanych stron spadła z 270000 do 56000 - co mniej więcej odpowiada temu co zostawiłem otwarte. Od 2 tygodni ilość zaindeksowanych stron serwisu wzrosła o 40000 - bardzo mnie ciekawi co się dzieje.

site - pokazuje url + description, mnie chodzi o listing samych url-i - który później ustawię alfabetycznie w wordzie i przeanalizuja co zacz.

[zgred]

oczywiscie że jest !

bierzesz zgrzewke DUŻĄ red-bulla

budzisz si eo 6 rano

siadasz do e-weblinka

grzecznie wstukujesz np 20.000 linkow - co 1000 linkow walisz jednego reda

ustawiasz priorytety na 1

zapodajesz powiweedzmy po 250 pkt na kazdy link

konczysz zgrzewke po 8 godzinach

czekasz 3 dni ... i zaindeksowane

site:www.domena.com - tylko takie cuś znam ewentualnie mozna zawsze zrobic sitemap ?

[poleposition]

Jest soft za kilkaset $ i działa tak :

Wchodzi na domenę : www.adres.pl wyszukuje w niej inne domeny, puźniej wchodzi na te wyszukane itd.

24h pracuje sobie

[gerdi]

Może istnieje jakis sitemap generator ktory przy okazji robienia mapy zaznaczy strony zaindeksowane w Google.

[Maximus Marius]

Google za bardzo nie dzieli sie swoimi danymi.

Więc zapomnij że bedziesz wiedział takie rzeczy w 100% pewne.

Wszystko bedzie na oko, przyblizone mniej lub bardziej.

[Kaviorek]

Sprawa się zapewne rozejdzie o DC.

1. Jeżeli skupić się tylko na jednym DC to można to zrobić w prosty sposób, ale na około, tj. odpytywać o cache każdą podstronę.

2. Aby Google nie zablokowało IP to wcześniej (lub równolegle) wpisywać 'szczegółowe' zapytania o site: zapisywać wyświetlone urle, z tej puli już nie pobierać do punktu 1. Można w ten sposób sporo wykluczyć.

[gerdi]

Kaviorek racja Google przy odpytywaniu zablokuje IP, poza tym wyniki nie będę miarodajne. Jeżeli chodzi o pokazywanie podstron w cache to ja np mam tak: sprawdzam przykładowo 20stego(dnia miesiąca) i mam 0, 21 i 1 zaindeksowana z 20, 22 i 3 zaindeksowane 2 z 18 i 1 z 20. Więc ma zaindeksowane tylko nie pokazuje, albo pokazuje dopiero po jakimś czasie. Czasem oczywiście mam też tak że pokazuje w cache a za kilka dni już nie ma - jednak dzieje się tak rzadko. Zazwyczaj jak już widzi w cache to tam siedzi.

Niezłe zamieszanie G. wprowadza w ilości zaindeksowanych podstron. Ja również stawiałbym na różne DC.

[zgred]

soft: websitecrawler

[Maxximilian]

To ja ma lepszy pomysł.

1) Pani Monika z Koła Gospodyń Wiejskich (z tych co piorą, gotują, dają xxxx i tańcują - a wszystko tanio)

2) Opera

3) google site:domain/100

4) narzędzie pokaż odnośniki

5)

(a tak 1000x)

{

zaznacz, kopiuj adres odnośnika ->wklej do notatnika

}

6) 3h i -60pln +lodzik