Robots.txt rzekomo blokuje URL-e

[moody]

W Narzędziach dla Webmasterów - po przesłaniu mapy witryny - wyskakuje mi błąd:

URL zablokowany przez plik robots.txt.

Mapa witryny zawiera URL-e blokowane przez plik robots.txt.

Nie daje mi to spokoju bo wg. mnie wszystko jest w porządku. Strona weszła do indeksu, ale zaindeksowały się też bebechy - klik. Wirtualne piwo dla tego, kto powie mi co jest niby źle...

[adam196]

Może wcześniej blokowałeś strony, który był istotne a Google jeszcze nie zdążył zaktualizować nowej wersji pliku robots.txt jeśli coś zmieniałeś ostatnio.

Jakie strony masz blokowane wg. GWT ?

[moody]

Nic nie zmieniałem - strona jest nowa. Wg. Google robots.txt blokuje wszystkie 17 stron witryny (mimo, że wszystkie są w indeksie).

[Altaica]

Patrzyłem w robots i sitemapę, konfliktu nie widzę. Natomiast zrób mapę za pomocą tego programu Soft Plus Gsite Crawler - będzie większe i bardziej dokładna. Wrzuca się zarówno plik sitemap jak gss na serwer.

Usuń starą mapę i zastąp nową. Zobacz po kilku dniach czy problem się powtarza.

[krzys86]

Przy instalowaniu wordpress zaznaczyłeś pewnie blokowanie wyszukiwarek , a dopiero poźniej zezwoliłeś robotą indexować stronę. Ja tak zrobiłem i też miałem ten komunikat w webmaster tools , ale po dwóch dniach wszystko się ustatkowało