Narzędzie do zbierania urli z naszej strony

[Ojciec_Pio]

Potrzebuję przetrzebić sklep internetowy aby zorientować się nad stanem urli w tym sklepie. Chcę wiedzieć czy wszystkie są przyjazne czy nie, czy są jakieś fake itd. Co do tego zadania będzie najlepsze? Myślałem o generatorze site map, ale może jest coś odpowiedniejszego? chodzi mi głównie o wyłapanie duplikatów

[Sylar]

https://www.screamingfrog.co.uk/seo-spider/ ?

[Merf]

Screaming Frog SEO Spider może Ci się przydać.

[Ojciec_Pio]

No tak, zapomniałem o żabie. Nigdy tego narzędzia nie używałem, aż wstyd się przyznać. A przecież to ważna zabawka. Dzięki za info, wreszcie to przetestuję.

Chociaż na 3 mln podstron może nie starczyć. Zobaczymy

[SEO_Rak]

poproszę o adres sklepu. z 3 mln podstron... Szybciutko, chyba ze znow Cie fantazja ułanska poniosła. I interaktywna firma znów zmieniła się w marna jednnoosobówke...

[Ojciec_Pio]

poproszę o adres sklepu. z 3 mln podstron... Szybciutko, chyba ze znow Cie fantazja ułanska poniosła. I interaktywna firma znów zmieniła się w marna jednnoosobówke...

Wrzuciłem na priv

[SEO_Rak]

i podjąłeś się zlecenia i teraz nie wiesz co zrobić?

[featmilka]

A sprawdzałeś Xenu?

[Ojciec_Pio]

To jest klient Agencji. Wiemy co robić, ale robię analizę dla siebie, bardziej z ciekawości, bo chcę wprowadzić kilka modyfikacji. Do tego co potrzebuję wystarczy komenda inurl. Jednak są problemy programistycznie, ktorych teraz nie przeskoczymy, niestety.