Skocz do zawartości

Jak zablokować podstrony przed botami bez użycia robots.txt

Tomaan

Przez Tomaan
w Roboty

Rekomendowane odpowiedzi

Tomaan Newbie

Tomaan

Opublikowano
Opublikowano

Hej,

czy jest jakiś magik, któy mógłby użyczyć wiedzy na temat Apacha i podać regułę, która blokuje indeksację bota Google dla podstrony lub pliku np. PDF?

Reguła

RewriteEngine On
RewriteBase /
RewriteCond %{HTTP_USER_AGENT} Twice|Roge|Yand|Baidu|site|Ahre|seo|Yahoo|Voil|libw|Java|Sogou|psbot|Exabot|boit
ho|ajSitemap|Rankivabot|DBLBot|MJ1|Rankivabot|ask
RewriteRule ^(.*)$ https://onet.pl/ [L,R=301]

blokuje/przekierowuje określone boty ale dla całej domeny a ja chciałbym zablokować bota Google wybiurczo na podstronę jakąś i plik po to aby nie używać robots.txt

druga sprawa to czy taki kod jak wyżej musi mieć 301? nie można dać jakieś tam deny czy czegoś podobnego? :rolleyes: deny działa ale rozumem, że powodowane przez komendę deny błąd 500 może zniechęcić wyszukiwarkę do domeny tak? bezpieczniej przekierować za pomocą 301?

Będę wdzięczny za cynk.

Odnośnik do komentarza
Udostępnij na innych stronach
  • 3 miesiące temu...
  • 2 tygodnie później...

Zarchiwizowany

Ten temat przebywa obecnie w archiwum. Dodawanie nowych odpowiedzi zostało zablokowane.

Tematy

  • Ostatnio przeglądający   0 użytkowników

    • Brak zarejestrowanych użytkowników przeglądających tę stronę.
×
×
  • Dodaj nową pozycję...

Powiadomienie o plikach cookie

Umieściliśmy na Twoim urządzeniu pliki cookie, aby pomóc Ci usprawnić przeglądanie strony. Możesz dostosować ustawienia plików cookie, w przeciwnym wypadku zakładamy, że wyrażasz na to zgodę. Warunki użytkowania Polityka prywatności