Skocz do zawartości

robots.txt i blokada całości z wyznaczeniem dostępu


Darku

Rekomendowane odpowiedzi

Czy mogę zablokować dostęp botów do całej strony, a jednocześnie dopuścić do indeksowania kilka wyjątków? Przygotowałem już wstępny kod... może ktoś potwierdzić czy jest on poprawny.

User-agent: *

Allow: /faq/

Allow: /profil/

Allow: /premium/

Allow: /kontakt/

Allow: /oferty/

Allow: /regulamin/

Allow: /film/

Allow: /sprzedaz-hurtowa/

Disallow: /

Dodatkowo - może od razu zapytam - jeśli link wygląda mniej więcej tak: domena.pl/film/2222/nazwa-filmu to by zaineksował to, wystarczy, że dodam Allow: /film/ ...?

Odnośnik do komentarza
Udostępnij na innych stronach

Zarchiwizowany

Ten temat przebywa obecnie w archiwum. Dodawanie nowych odpowiedzi zostało zablokowane.

  • Ostatnio przeglądający   0 użytkowników

    • Brak zarejestrowanych użytkowników przeglądających tę stronę.
×
×
  • Dodaj nową pozycję...

Powiadomienie o plikach cookie

Umieściliśmy na Twoim urządzeniu pliki cookie, aby pomóc Ci usprawnić przeglądanie strony. Możesz dostosować ustawienia plików cookie, w przeciwnym wypadku zakładamy, że wyrażasz na to zgodę. Warunki użytkowania Polityka prywatności