robots.txt - blokowanie subdomen

[albertc]

Cześć,

Chciałbym zablokować indeksowanie wszystkich subdomen w serwisie. Domeny znajdują się w podkatalogach, więc wychodziło by na to, że chcę zablokować indeksowanie wszystkich katalogów. Czy mogę tego dokonać za pomocą jednej komendy? Czy muszę każdy katalog blokować osobno?

[Veal]

Z poziomu robots.txt domeny głównej nie można zablokować jej subdomen. Jeśli subdomeny kierują do tego samego folderu na serwerze co strona główna:

1. Utwórz plik robots-sub.txt o treści:

   User-agent: *
   Disallow: /
   

   
   

2. Dodaj do pliku .htaccess:

   RewriteCond %{HTTP_HOST} !www.adres.pl$
   RewriteCond %{HTTP_HOST} .adres.pl$
   RewriteRule ^robotx.txt$ robots-sub.txt [R=301,L]
   

   
   

Powinno działać.

[autogsm]

A jak można zablokować indeskowanie subdomeny, która powstała przy założeniu konta na hostingu i również prowadzi do głównego katalogi i google ją jakimś cudem zaindeksowały?

[krzycho]

robots.php:

<?php
header("Content-Type: text/plain");
if($_SERVER['HTTP_HOST']=='domena_dla_ktorej_disallow') {
echo "User-agent: *\r\nDisallow: /\r\n";
}
?>

i rewrite

RewriteRule ^robots.txt$ robots.php [L]