Blokada Yahoo i Binga

[kamseo]

Jak zablokować Yahoo i Binga, żeby nie pokazywały linków zwrotnych ?

[Gość]

Musiałbyś je całkowicie zablokować = zero wejść z tych wyszukiwarek.

zoozool - Yahoo i Bing należą chyba do tych, którzy respektują wpisy w robots.txt.

[zoozool]

blokuj htaccesem

https://www.forum.optymalizacja.com/index.p...t=0&start=0

tutaj są ipki robocików, mogą być nie aktualne, ale możesz blokować robota po tym jak się przedstawia

[βασιλιάς]

Oczywiście wszystkie strony linkujące muszą zablokować Yahoo i Bing, a nie tylko strona docelowa.

[sleaquit]

a nie tylko strona docelowa.

linki z niezablokowanych stron do zablokowanej sa normalnie wyswietlane

[Arni]

po kątem linków

nie ma sensu blokowania docelowej

[kamseo]

Przypominam jaki mam cel - zablokowanie Yahoo, Binga oraz innych wyszukiwarek.

Dostęp ma mieć tylko Google i Netsprint + Szukacz.

Wybrałem taki zapis robots.txt który znalazłem na fabryce spamu.

User-agent: Googlebot
User-agent: holmes
User-agent: NetSprint
Disallow:

User-agent: *
Disallow: /

Czy jest poprawny i zadziała ?

Pozdrawiam

[Gość]

Raczej taki zapis jest poprawny:

User-agent: Teoma
Disallow: /
User-agent: Gigabot
Disallow: /
User-agent: Scrubby
Disallow: /
User-agent: Nutch
Disallow: /
User-agent: baiduspider
Disallow: /
User-agent: naverbot
Disallow: /
User-agent: yeti
Disallow: /

Te

User-agent: *

Disallow: /

Chyba raczej "zablokuje" wszystkie roboty, które respektują robots.

[βασιλιάς]

Te

User-agent: *

Disallow: /

Chyba raczej "zablokuje" wszystkie roboty, które respektują robots.

Wszystkie oprócz tych posiadających wyżej własne reguły.

[Arni]

skoro nie ma pewności czy bot zastosuje się do naszych życzeń w pliku robots

zapewne lepiej, bo pewniej byłoby zablokować go w .htaccess

Wie ktoś jak zablokować Slurpa, żeby Yahoo linków nie wypluwało przed oczy

wścibskiej konkurencji

Znalazłem coś takiego

order allow,deny

deny from xxx.xxx.xxx.xxx

deny from xxx.xxx.xxx.xxx

allow from all

RewriteCond %{HTTP_USER_AGENT} nazwa1 [OR]

RewriteCond %{HTTP_USER_AGENT} nazwa2

...

RewriteRule .* - [F]

Najlepeej byłoby poblokować wszystkie boty za wyjątkiem Googla, głównie bowiem pod niego się pozycjonujemy

mało kto używa Yahaa, za wyjątkiem konkurencji

znalazłem jeszcze to https://www.forum.optymalizacja.com/index.p...st&p=634880

[pawloski]

User-agent: Slurp

Disallow: /

albo blokowanie wszystkiego ze słowem Slurp w UA zadziała

ale musisz to zrobić na wszystkich stronach linkujących, a nie na stronie linkowanej

bo link: i linkdomain: działają także dla zablokowanych stron, tylko nie wyświetlają linków z zablokowanych stron

[Arni]

tak, trzeba poblokować na linkujących nie linkowanej

tyle że najlepiej to zrobić .htaccess

ma ktoś ip crawlerów?

u mnie w statach wyświetla nazwy botów, ale ich ip już nie

[Arni]

czy te są wciąż aktualne

https://www.forum.optymalizacja.com/index.p...ost&p=34726