inteligentny googlebot?

[Liszek]

Witam serdecznie założyłem niedawno kopie katalogu dmoz. Zacząłem zapisywać ruchy robotów odwiedzających stronę do pliku oraz dodałem zapisywanie zmiennej z wartością parametru podstrony.

logi można na żywo obejrzeć pod adresem: logi dmoz

Ciekawe jest że na stronie głównej nie ma żadnego linku ze zmienną dir

Nie ma nawet poprawnej strony dmoz.newvision.com.pl/dir/

A mimo wszystko robot googla oraz msn zaraz po stornie głównej próbuje indeksować dir tak jakby dopasowywał to do jakiegoś szablonu????

Czy ktoś się z czymś takim spotkał????

[xnn]

hmm testowalem to chwile.. wina nie jest google lecz twojego skryptu ktory po otworzeniu / wczytuje /dir/

nie wiem od czego to zalezy ale ja refreshowalem tylko glowna strona ( oczywiscie zglaszajac sie jako Google ) i wlasnie niby ten katalog *otwieralem*

sprawdz ustawienia regulek mod-rewrite

edit

wywolania dmoz.newvision.com.pl loguje jako index zas dmoz.newvision.com.pl/ jako dir/

[Liszek]

hmm testowalem to chwile.. wina nie jest google lecz twojego skryptu ktory po otworzeniu / wczytuje /dir/

nie wiem od czego to zalezy ale ja refreshowalem tylko glowna strona ( oczywiscie zglaszajac sie jako Google ) i wlasnie niby ten katalog *otwieralem*

sprawdz ustawienia regulek mod-rewrite

edit

wywolania dmoz.newvision.com.pl loguje jako index zas dmoz.newvision.com.pl/ jako dir/

81066[/snapback]

Dzikei wielkie za info