Jak wyłączyć indexowanie strony

[fikusik]

Cześć, czy mógłby mnie ktoś nakierować co w robots.txt wpisać, żeby nie indekoswało całej strony www?

[5corpio]

np.

Disallow: /

 

A bezpieczniej i tak założyć zabezpieczenie hasłem jeśli chcesz mieć 100% pewności że nic kompletnie nie będzie robot buszował.

[stania.info]

14 godzin temu, 5corpio napisał:

A bezpieczniej i tak założyć zabezpieczenie hasłem jeśli chcesz mieć 100% pewności że nic kompletnie nie będzie robot buszował.

A jak strona ma być np koszykiem w sklepie internetowym - którego nie chcemy indeksować ?

 

Można np za pomocą meta tagu:

<meta name="robots" content="noindex">

 

[fikusik]

Ok dzięki zastosowałem 

User-agent: *
Disallow: / 

 

Postawiłem klona sklepu i po prostu nie chce, żeby go indeksowało.