Usunięcie danych o swoich stronach z MS,OSE,ahrefs

[tomek_25]

Witam..

chodzi mi to żeby stronki moich klientów nie były od tej pory widoczne w botach typu majestic,ose,ahrefs -da się tak zrobić?

Trzeba pisać jakiś request do supportu tych narzędzi?

Może ktoś to robił i wie jak to wygląda?

Pozdrawiam tomek

[f13k]

LINK

Tutaj chyba uzyskasz bardziej interesującą Cię odpowiedz bo od samego źródła.

Dodatkowo :

user-agent: AhrefsBot

disallow: /

Tylko, że to tylko blokuje

[pozycjo]

LINK

Tutaj chyba uzyskasz bardziej interesującą Cię odpowiedz bo od samego źródła.

Dodatkowo :

user-agent: AhrefsBot

disallow: /

Tylko, że to tylko blokuje

MS

User-agent:Mj12bot

Disallow: /

[Koobe]

Też chcę taki manewr wykonać, ale czy zablokowanie bota = zniknięcie aktualnych danych?

[tomek_25]

Też chcę taki manewr wykonać, ale czy zablokowanie bota = zniknięcie aktualnych danych?

Nie.Po prostu blokujesz możliwość dalszych aktualizacji robota.

Musi się dać bo jeśli chce być niewidoczny w google to dodaje plik z webmaster toolsa,domene do panelu a potem daje żeby nie indeksował domeny i koniec kropka.

Poza tym to że robot majestica sobie zapierdzielał to nie znaczy że ja się na coś zgadzałem żeby sobie mógł smigać po moich stronach.

Na dniach spróbuje coś do nich skrobnąć (o ile w ogóle się gdzieś da t am napisać) i dam znać

Pozdrawiam

[ManiaQ]

i dodatkowo robot OSE to rogerbot

[zgred]

https://seo.zgred.pl/blokowanie-robotow-maj...oraz-ahrefs-989 warto przejrzeć komentarze do wpisu

[tomek_25]

Wdrożę to jutro u swoich klientów.

Dzięki zgred

Pozdrawiam

[zakręcony]

@zgred czy to wywala już istniejące wpisy w tych narzędziach dotyczące blokowanej strony, czy tylko blokuje wejście i jak zauważył wyżej Tomek, nie aktualizuje informacji o stronie?

wcześniej wydawało mi się, że sama blokada załatwia sprawę, ale dzis już taki pewny nie jestem

[tomek_25]

Napisał zgred w komentarzu na swoim blogu.

Na pewno przy zablokowaniu nie można w MajesticSEO zrobić raportu o witrynie.

A to mnie głównie interesuje.

Pozdrawiam

[zakręcony]

kosz

[zakręcony]

przy okazji, czy może mi ktoś wyjaśnić, jakim cudem w OSE pojawiają się linki do ustawianej domeny z miejsca gdzie na początku skryptu mam to:

$ua = strtolower($_SERVER[HTTP_USER_AGENT]);
$ip = $_SERVER[REMOTE_ADDR];
$ur = $_SERVER[REQUEST_URI];

if (preg_match('/(wget|roge|bajdu|ahre|mj1|ask)/', $ua)||preg_match('/zoom_highlight/', $ur)||$ip == "xx.xx.xxx.xxx"){header("HTTP/1.1 301 Moved Permanently");header("location: https://google.com");header("Connection: close");exit;}

dodam, że od początku istnienia strony z linkiem ten kod tam wisi

[zakręcony]

Nie zauważyliście, że w opensiteexplorer pojawiają się ostatnio linki z miejsc gdzie zablokowano dotęp botowi seomoz'a?