Reakcja google

[LuckySpamer]

wpis wyglada tak:

User-agent: google*

Disallow:

User-agent: *

Disallow: /

Czy on zostanie zrozumiany jako wykluczenie wszystkich robotów poza google, googlebot-image, googlebot-mobile i pozostałych rodzajów googla?

Czyli wejdzie wszystko co związane z nazwą google a reszta robotów (np. yahoo) nie wejdzie?

[OMG]

Tym wpisem raczej wszystkie boty wykluczysz.

[LuckySpamer]

Pewnie tak.

Jakie boty wykluczacie?

to moja lista:

User-agent: msnbot

Disallow: /

User-agent: slurp

Disallow: /

User-agent: teoma

Disallow: /

User-agent: Yandex

Disallow: /

User-agent: twiceler

Disallow: /

User-agent: gigabot

Disallow: /

User-agent: scrubby

Disallow: /

User-agent: robozilla

Disallow: /

User-agent: Dolphin

Disallow: /

User-agent: Dolphin/1.0

Disallow: /

User-agent: jyxobot

Disallow: /

User-agent: linkwalker

Disallow: /

User-agent: hswt_domcrawler

Disallow: /

User-agent: zoomspider

Disallow: /

User-agent: netsprint

Disallow: /

User-agent: betabot

Disallow: /

User-agent: ia_archiver

Disallow: /

User-agent: baiduspider

Disallow: /

User-agent: naverbot

Disallow: /

User-agent: yeti

Disallow: /

User-agent: psbot

Disallow: /

User-agent: asterias

Disallow: /

User-agent: msnbot-media/1.0

Disallow: /

User-agent: mlbot

Disallow: /

User-agent: jyxobot/1

Disallow: /

User-agent: hswt_d0mcrawler

Disallow: /

User-agent: szukacz

Disallow: /

kogo jeszcze by pasowało zablokować?

calkiem ostatnio pojawił sie: Yandex

Przeciązał mi praktycznie 50% mocy dedyka.

[perplexus]

blokując roboty

wpędzasz się w kłopoty

jeśli wszyscy Cię indeksują

użytkownicy łatwiej Cie wyszukują

nie przejmuj się transferem zużytym

obijesz sobie hajsem nabitym

[LuckySpamer]

Rymowac sie rymuje pięknie, ale nie bede sie stosował

Jak inni chcą prosze bardzo, ja bede tępił te szkodniki ;-)

[crack]

Po co generować niepotrzebny transfer na stronach dla punktów.