Plik robot.txt

[erotiksite]

Witam,

Pierwszy raz tworzę plik robot.txt, chciałbym się upewnić że jest w porządku :

Otwieram notatnik gdzie wklejam taką treść :

User-agent: Googlebot

User-agent: Googlebot-Image

Disallow: /podstrona.html

?

Chcę zablokować indeksacje kilku podstron, podstrony są w tym samym katalogu co index.html. W każdym linku w serwisie prowadzącym do wybranych podstron wstawiłem rel="nofollow", chciałbym mieć jednak pewność że te podstrony nie wejdą do indeksu.

Mam na stronie także kilka linków z przekierowaniem do innego serwisu, linki w postaci " domena.pl/katalog/ " , linki mają nadany atrybut rel="nofollow" - czy te linki również mam wstawić do pliku robots.txt ?

User-agent: Googlebot

User-agent: Googlebot-Image

Disallow: /podstrona.html

Disallow: /katalog/

?

[Blastowiec]

Tutaj masz odpowiedź: https://www.google.pl/search?q=generator+robots.txt i gotowe pliki tylko wpisujesz to co chcesz