Generator dużych map

[chomik3]

Szukałem na forum, ale znalazłem niczego dobrego.

Szukam programu/skryptu który da rade ogarnąć stronę z 500k podstronami oraz da radę podzielić mapę na mniejsze (do 50k).

Próbowałem polecanego na forum https://www.auditmypc.com/xml-sitemap.asp bazującego na javie, ale dał radę 60k a potem zabrakło pamięci w javie (przeglądarka już i tak ledwo chodziła). Próbowałem też GSiteCrawler, ale wiesza się przy dłuższym czasie pracy.

Wszelkie generatory online odpadają, bo chyba żaden w bezpłatnej wersji nie da rady takiej ilości stron wrzucić do mapy.

Jesteście w stanie coś polecić?

[INOMan]

Zrób to przez skrypt generujący to po stronie serwera, a nie przez robota który będzie chodził po całej Twojej domenie i wykrywał strony.

[Grey Ronin]

Spróbuj też www.xml2java.net czyli framworka który specjalnie został stworzony do dużych map.

[Gość R.U.Sure]

Spróbuj xml-sitemaps.com/standalone-google-sitemap-generator.html - niedrogi, działa po stronie serwera.

[arve_lek]

Nie spotkałem lepszego: inspyder sitemap creator

Testowałem kiedyś na onecie i ponad 1mln mi wygenerowało sitemape.