site map creator is needed

[ascent]

tak jak w temacie

A czego byś wymagał od takiego robota? Przeszukanie całej strony? Jakieś specjalne życzenia? :roll:

[luman]

kiedys wlazlem na stronke co ladnie tworzyla ale zagubilem adresik

ot chce tylko zeby stworzylo mapke nic wiecej

[ascent]

kiedys wlazlem na stronke co ladnie tworzyla ale zagubilem adresik

ot chce tylko zeby stworzylo mapke nic wiecej

Jeśli chcesz tą mapke mieć tylko dla wyszukiwarek to naklepałem szybko:

https://www.pozycjonowanie.pl/smc.html

Na przyszłość muszę dopracować output do jakiegoś "ładnego" stanu. Jeśli masz jakieś sugestie - mogę coś dorobić/poprawić itp. Jak stan będzie "zjadalny" opublikuje to w dziale "Narzędzia". Skrypt crawluje wszystkie linki wewnętrzne (z limitem 30). Oczywiście nie lubi ramek i JS. Nie zwraca uwagi czy linki są dynamiczne czy nie. Prosze nie wywoływać go wielokrotnie. Dla serwera docelowego powinien być przyjazny - robi przerwe 1s pomiędzy odwołaniami. Gdy się otrzyma wynik - wystarczy zaglądnąć w źródło i przekopiować.

Have fun 8)

[zYm3N]

Czy możesz opublikować źródło ? :-)

Skrypcik fajny.. Jak zwykle ktoś mnie uprzedził

[ascent]

Czy możesz opublikować źródło ? :-)

Niestety, nie. Sercem skryptu jest biblioteka crawlera, którą rozwijam komercyjnie.

Skrypcik fajny.. Jak zwykle ktoś mnie uprzedził

Gdybyś chciał coś takiego pisać to polecam skorzystać z Perla. PHP się do tego nie nadaje. Jeśli upierasz się na PHP to korzystaj z funkcji preg_*() (wyrażenia PCRE) zamiast ereg*() (wyrażenia POSIX).

Co do nauki wyrażen na początek dobre będzie:

https://www.zvon.org/other/PerlTutorial/Out...t/contents.html

https://www.perldoc.com/perl5.8.4/pod/perlre.html

https://gnosis.cx/publish/programming/regul...xpressions.html

[Dael...]

Nadal nie wiem co mam z taka mapa strony zrobic... pomoze ktos?

[youki]

Nadal nie wiem co mam z taka mapa strony zrobic... pomoze ktos?

podlinkowac do glownej strony

[zYm3N]

mam kilka pytań:

1. Co powinno się dziać, jeśli skrypt znajdzie na swej drodze linka w postaci:

"../plik.html"

mimo, że jest to pierwszy plik, od którego zaczął parsować (czyli wychodzi na to, że plik, do którego strona linkuje, jest w katalogu wyżej..) Co wtedy ?

2. Ktoś się orientuje, jak zrobić wyświetlanie informacji w stylu:

Parsuję stronkę 1...

Parsuję stronkę 2...

Bo z tym są małe kłopoty żadne flushe nie działają :|

3. Dzielić ilość linków na podstrony ? Czy tworzyć wynik, jako jedną stronę ?

4. Jakieś propozycje ? Pomysły ?

Powoli pracuję nad skryptem (proste stronki juz parsuje), ale prace pełną parą ruszą około 1.. (ferie )

pozdr.

[youki]

3. Dzielić ilość linków na podstrony ? Czy tworzyć wynik, jako jedną stronę ?

wedlug mnie powinien dzielic na podstrony, a do podstron dolaczac linki nawigacyjne do poszczegolnych podstron i z uwzglednieniem zeby to bylo 100 linkow na podstrone (lepsza indeksacja), a jesli tych linkow byloby na przyklad 100 000 no to wtedy nawigacja musialaby byc jeszcze bardziej rozbudowana w glab - musialbys wymyslic odpowiedni algorytm ktory by to podzielil

co do pozostalych pytan to moze ktos inny sie wypowie

[luman]

dzila jeszcze ten link do mapki ?

[luman]

jak myslicie podzielic mapke jesli linkow 1500 ... czy googlas lyknie

jakies doswiadczenia

[zero3]

jak myslicie podzielic mapke jesli linkow 1500 ... czy googlas lyknie

zobacz cache tej strony https://www. unitedscripters.com/hotvamps/masonlink.html

[luman]

https://216.239.59.104/search?q=cache:https:...GGLD:en&strip=1

czyli co google ma glebokie gardziolko (weteran )