Zapętlenie robotów

[MMP]

Kolejny problem, ostatnio mam ich coraz więcej

Tym razem chodzi o www.fajneforum.pl ( ustawcie user agent Google ) mianowicie gdzieś musze mieć błąd w adresowaniu linków bo w logach widze że google mi sie zapętla i indeksuje tą samą strone spod wielu adresów, mianowicie o to przykład:

www.fajneforum.pl/Ulubiony%20zesp%C3%B3%C5%82/hello%20:P-temat-forum-235.html
www.fajneforum.pl/Na%20kogo%20g%C5%82osowa%C5%82e%C5%9B/Ligi-temat-forum-230.html
www.fajneforum.pl/Ulubiony%20zesp%C3%B3%C5%82/ehh...:/%20lol%20pustaczki-temat-forum-234.html

i wiele innych. A tak powinny wygladac poprawne wersje

www.fajneforum.pl/hello%20:P-temat-forum-235.html
www.fajneforum.pl/Ligi-temat-forum-230.html
www.fajneforum.pl/%20lol%20pustaczki-temat-forum-234.html

Może ktoś widzi co tutaj jest nie tak?

[Erbit]

Pierwsze napotkane błędy to...:

Dla potrzeb URL usun znaki typu: array(" ",":","'","?",'"',"!","@","$","%","&"), dołóż do tego polskie znaki ś->s, ó->o itd, także kropkę, przecinek...

chodzi o to aby url nie był "Jaki masz telefon ???-temat-forum-8.html"

a raczej "Jaki-masz-telefon-temat-forum-8.html"

unikniewsz wiekszosci problemow... w tym przede wszystkim problemow z mod_rewrite (twoj nastepny topik)

co do zapetlenia - nic na razie nie widze

[edyta]

Generalnie -

"spacja", "przecinki","kropki"->"-"

"polskie ogonki" -> "bez ogonkow"

"pozostale znaki nie bedace literami" -> ""

[MMP]

unikniewsz wiekszosci problemow... w tym przede wszystkim problemow z mod_rewrite (twoj nastepny topik)

To był zupełnie inny problem, bo tam przyjazne urle obsługuje php. A mod_rewrite ukrywa tylko nazwe pliku index

O tych niezwykłych znaczkach wiem dobrze, ale przeprowadzam jeden test. Ale robot mi chodzi po jakiś dziwnych urlach a nie potrafie znaleźdź skąd je bierze.

[Irek]

Ale robot mi chodzi po jakiś dziwnych urlach a nie potrafie znaleźdź skąd je bierze

Linki do dziwnych urli mogą już nie istnieć na stronie (na nic nasze szukanie). Jednak Google je pamięta i jak długo będziesz mu podstawiał treść do tych adresów tak długo będzie na nie wchodził.

[Erbit]

jak długo będziesz mu podstawiał treść do tych adresów tak długo będzie na nie wchodził.

A nawet jak nie bedziesz podkladal tresci to i tak bedzie wchodzil przez parę miesiecy.

[MMP]

Najgorsze jest to że mod-rewrite jest tak zrobiony że zawsze przekierowywuje na jakiś post

[Erbit]

Ustawiałem UA na Google i nic... niczego nie wykryłem..

Jeśli zaś masz taki link

www.fajneforum.pl/Ulubiony%20zesp%C3%B3%C5%82/hello%20:P-temat-forum-235.html

zamiast takiego

www.fajneforum.pl/hello%20:P-temat-forum-235.html

to szukaj przyczyn w PHP tam gdzie podmieniasz URL a nie w .htaccess

[MMP]

Ale ja nie szukam błędu w mod_rewrite tylko własnie w php, ale najpierw musze gdzieś znaleść te brzydkie adresy.

[pneuma]

Masz względne adresy, albo postaraj się o bezwzględne albo zadeklaruj bazowy url - inaczej jak się wchodzi w dowolny katalog to odwołanie z niego jest coraz "głębsze".