Narzędzie do analizy platform / wykrywanie typu katalogu

[rymasz]

Krótko i na temat - szukam desktopowego narzędzia do sprawdzania typów katalogów. Czy możecie coś polecić?

Znam "Platform Link Reader" oraz "Sick Platform Reader" - przydatne, ale skuteczność oceniam jako średnią / względną.

Próbowałem skorzystać z Google oraz tutejszej wyszukiwarki, ale efekt marny.

Marzy mi się soft, który będzie analizował adres pod kątem:

1) słów w HTML'u / footprintów (jak powyższe)

2) istnienia dodatkowych stron/adresów typowych dla danego katalogu

3) analizy strony z formularzem dodawania wpisu

4) z podstawowym sprawdzeniem czy formularz jakkolwiek działa

... i dopiero przy prawdziwości kilku z testów na dany katalog, kwalifikował adres jako dany katalog.

Czy istnieje coś takiego, czy muszę pisać sam? Może być płatne, ale w granicach rozsądku.

Z góry dziękuję za podpowiedzi.

[cinmar]

Tylko USM spełni twoje wymagania, tu link do wątku na PIO

[rymasz]

Dziękuję za szybkie info. Żeby nie zawracać Mion'owi niepotrzebnie głowy - z Waszego doświadczenia, USM ogarnia to o czym pisałem powyżej, a czego nie mają wspomnianie przeze mnie platform readery?

Zależy mi tylko na bardzo dobrym rozpoznawaniu typu katalogu z podanej przeze mnie listy.

[Sokal]

jak dobrze znasz dane skrypty i poznasz te kilka komend do rozpoznawania skryptów to będzie się dobrze sprawdzał

[slaymer]

Licorne AIO tez ma taką opcję - oczywiście jak dobrze skonfigurujesz footprinty wcześniej

[Jakub Błaszczyk]

To i ja się podłączę

Porównywał ktoś z Was może USM z Licorne AIO ? mam tu na myśli np szybkość sprawdzania itp

[rymasz]

jak dobrze znasz dane skrypty i poznasz te kilka komend do rozpoznawania skryptów to będzie się dobrze sprawdzał

Ale to rozumiem działa raczej na zasadzie - "przetestuj wskazane adresy pod kątem danej platformy" i dla każdego typu katalogów trzeba wypełniać [Wyszukiwany ciąg znaków] + [Ciąg znaków do dodania] + wczytać footprinty?

Mnie się marzy takie coś, gdzie raz konfiguruje się definicje katalogów (footprinty + najczęstsze adresy podstron + najczęstsza budowa formularza) i później już tylko mieli URL'ami (ewentualnie co jakiś czas te definicje rozbudowuje).

Licorne AIO tez ma taką opcję - oczywiście jak dobrze skonfigurujesz footprinty wcześniej

Dzięki za informację. Od razu podpytam - Licorne obsługuje tylko footprinty, czy jest "inteligentniejsze"?

Jeszcze odnośnie moich marzeń, to byłoby super gdyby program potrafił znaleźć, że pod adresem:

jakas_domena/jakis_podkatalog/2013/jakis-wpis-ze-slowami-seo-w-urlu/?c=12

jakiś katalog SEO "siedzi" pod adresem jakas_domena/jakis_podkatalog/

a w innym wypadku jest pod adresem jakas_domena

czyli inteligentnie sprawdzał różne możliwości, bo czasami ze skrócenia URL'a do root'a dużo nie wynika...

[Paweł Sokołowski - Eline]

Mnie się marzy takie coś, gdzie raz konfiguruje się definicje katalogów (footprinty + najczęstsze adresy podstron + najczęstsza budowa formularza) i później już tylko mieli URL'ami (ewentualnie co jakiś czas te definicje rozbudowuje).

ScrapeBox, addon Page Scanner

https://www.scrapebox.com/page-scanner

[cinmar]

Dodatek SB jest dobry bo szybki, natomiast program miona polega na tym że wpisujesz ciąg znaków i podajesz mu podstrone czy stronę główną, jeśli jej nie znajdzie mozesz zakonczyć działanie lub sprawdzić inną podstronę. Wszystko zapisjesz do pliku, przykład dla webmini gdzie sprawdza czy jest pod strona /pages/0/desc/ i w niej słowo kluczowe "Sortowanie" jeśli nie ma sprawdza pod stronę :/dodaj-artykul i słowa kluczowego "Podaj adres strony" jak nie znajdzie koniec. Wyniki zapisuje do webmini.txt

<UltraSeoMasterSkrypt>
   <NazwaSkryptu>webmini</NazwaSkryptu>
   <NazwaPlikuZapisu>webmini.txt</NazwaPlikuZapisu>
   <InstrukcjeSkryptu>
       <Instrukcja>GET:/pages/0/desc/</Instrukcja>
       <Instrukcja>FOOTPRINT:szukany LIKE '%Sortowanie%'</Instrukcja>
       <Instrukcja>IF_FOOTPRINT_FALSE:</Instrukcja>
       <Instrukcja>GET:/dodaj-artykul</Instrukcja>
       <Instrukcja>FOOTPRINT:szukany LIKE '%Podaj adres strony%'</Instrukcja>
       <Instrukcja>IF_FOOTPRINT_TRUE:</Instrukcja>
   </InstrukcjeSkryptu>
</UltraSeoMasterSkrypt>

[rymasz]

@Paweł i @cinmar - dziękuję za informacje. Tego zdaje się szukałem.

[KataLogi.co]

Czyli o programie który rozpoznaje dowolne skrypty z podanej listy wcześnie i pogrupowanie stron według skryptu narazie mogę pomarzyć ?

[Paweł Sokołowski - Eline]

Jak nie czytasz tego co napisalismy powyzej, to jak najbardziej mozesz marzyc

[KataLogi.co]

Hehe widocznie nie rozumiem albo źle napisałem ale napewno czytam

Chodziło mi o rozpoznawanie dowolnych skryptów i nie tylko katalogów.

A może lepiej wytłumacze o co mi chodzi, mam liste stron powiedzmy 100tys różnych adresów www chciałbym ją pogrupować na oddzielne listy grup stron w zależnosci od skryptu na którym stoja czyli np do jednego pliku zapisuje strony na skrypcie seokatalogu , w drugim strony które sa np forami na phpBB , i tak dalej.

Nastepnie w podzielonych grupach mógłbym strony podzielic jeszcze ze wzgledu na parametry BL, wiek i tak dalej .Dzięki temu bym kontrolował czy nie mam linków, postów , wpisów np 2tys. seokatalogów a na sinoke tylko 100.

[Mroczo]

KataLogi.co dokładnie to zrobisz za pomocą softu mion-a. Usm ma tą fajna funkcję ze po wprowadzeniu footprintów dla np. Seokatalogów, WordPress, Webmini, Wiki czy innych dowolnych jakie sobie napiszesz segreguje do osobnych plików na przykładzie cinmar USM zapisze listę webmini jako webmini.txt itd jak sobie przygotujesz footpriny dla np w/w to dostaniesz listy Seokatalg.txt wordpress.txt webmini.txt wiki.txt

[MaxPan]

daj ogłoszenie ze chcesz takie coś zlecić, znam jedna osobę co takie coś napisała, jak będzie zainteresowana to tobie to sprzeda, jak nie to nie. Dość często jest na PIO wiec chyba ogłoszenie przeczyta. Uprzedzam cena 100-200 zł nie wchodzi w grę.