Wracając do budowania wyszukiwarki -> „QuikSeek

[Saint]

QuikSeek tak ochrzciłem to ustrojstwo. Ostatnio temat stanął na niczym ku mojemu ubolewaniu było więcej bicia piany niż robienia czegoś. Każdym razie teraz mam konkretny plan, konkretna nazwę i możemy zacząć coś robić pytanie tylko czy ludzie z pasją tacy jak piotrek, michal i jeszcze paru innych będą chcieli przyłączyć się do projektu?

W zasadzie trzeba będzie podzielić robotę na kilka części i ustalić deathliny:

- silnik wyszukiwarki (strona, wyświetlanie wyników, sposób wyszukiwania)

- pajączek (robocik, który będzie indeksował strony)

Do tego wszystkiego stoję przed zakupem RACK-owego servera, który przy pomyślnych wiatrach stanie w miejscu z najszybszymi łączami w Polsce.

To oczywiście jest bardzo w telegraficznym skrócie do tego wszystkiego zainstalujemy specjalny skrypt czy tez jakieś forum do prowadzenia projektu, aby informacje łatwiej przepływały.

[nrm]

czemu "quik"?

[Saint]

bo bylo do rymu

[Daniel Kędzierski]

kid mimo że bawie się nad swoją wersją, chętnie przyłącze się do projektu, bo tak samo jak staram się robić ją dla userów tak samo mogę pomagać przy tej enginiarce.

W czym mogę pomagać, no zapewne dobry pajączek musi latać, jeżeli skrypt uda się podzielić tzn pajączka na częściowe update, to można byłoby rozdzielić update na kilka serwerów pająków,

mogę postawić 2 pająko roboty które ktoś napisze i upgradować wyszukiwarkę, mój obecny pajączek może zaindeksować około 200 tys urli na dobę, nie wiele ale zawsze to pomocne, tzn indeksowałbym na pajączku wyszukiwarki, piszę tylko że mogę udostępnić jednego semprona na swoim łączu ktory by spełniał częściowo to zadanie.

Wiadomo że dobra enginiarka musi leciec na kilka pajączkach bo jeden nic nie wskura, jeżeli mogę w czymś jeszcze pomagać, to w filtrowaniu spamu.

pzdr

[MMP]

Ja moge napisac pajaki w php, ale musialbym miec struktóre bazy i jakie dane ma zbierac.

[Majkel]

To moze byc ekstra sprawa... sam myslalem, czy by czegos takiego nie zaczac sobie powolutku tworzyc... Nie wiem czy na wiele bym sie Wam przydal... moze za jakis czas sam zaczne cos kombinowac, nie wiem...

o pajakach wielkiego pojecia nie mam, glownie teoretyczne na razie. Jakbym mogl byc pomocny w czyms to ja chetnie, choc nie wiem w czym jeszcze konkretnie, tak się anonsuję Albo moze ja lepiej sie na razie zajme zdobywaniem kasy... ehhh. W kazdym razie super sprawa, jakbym mogl miec jakies swoje male zadanie i udzial w tym to bede szczesliwy

[Saint]

MMP w jakim sensie ci ta struktura potrzebna mozesz to okreslic nieco dokladniej? jesli nie wiesz jakie dane ma zbierac taki roboto to zapytaj szooka napewnoci to powie. Ewentualnie zobacz tu https://www.spiders.pl/

szookpl swoja droga bys mogl cos udostepnic z kodu byloby latwiej zaczac.

[MMP]

Głównie chodzi oto że nie wiem jakie dane ma zbierac.

Anachory z linków?

Całą strone zapisywac do bazy?

Tekst ze znaczników <h1><b>...?

[Saint]

https://www.widexl.com/remote/search-engine...g-analyzer.html rzuc okiem na to tj. w jaki sposob to dziala wpisz jakis adres i zobacz wynik.

[Kil Bill]

Mam pytanie z ciekawośći czy wasza wyszukiwarka jak wszystkie inne bedzie generowała podstrony :mrgreen:

Czy to czysta wyszukiwarka z robocikiem???

Patrzę na rynek co dzieje się ze schedą po Netsprincie