Plik robots.txt czy prawidołowo skonfigurowany?

[Rychu]

Witam

Mam pytanie czy plik robots.txt jest prawidołowo skonfigurowany w google search console pokazuje że ma dostęp ale w senuto już jest błąd że

 

Twój serwis posiada plik robots.txt, ale blokujesz w nim dostęp wszystkim robotom. W takim przypadku roboty mogą mieć problem z zaindeksowaniem twojej witryny.

 

Poniżej plik robots.txt

User-agent: Googlebot
Allow: /szablony/
User-agent: googlebot-mobile
Allow: /szablony/


User-agent: *
Disallow: /allegro/
Disallow: /boxy/
Disallow: /cache/
Disallow: /export/
Disallow: /harmonogram/
Disallow: /import/
Disallow: /inne/
Disallow: /javascript/
Disallow: /klasy/
Disallow: /listingi/
Disallow: /moduly/
Disallow: /moduly_stale/
Disallow: /pdf/
Disallow: /pobieranie/
Disallow: /programy/
Disallow: /szablony/
Disallow: /tcpdf/
Disallow: /ustawienia/
Disallow: /xml/
Disallow: /zarzadzanie/


User-agent: bingbot
Disallow: /


#Block out things that are secure or login oriented
Disallow: /formularz.php
Disallow: /haslo_przypomnienie.php
Disallow: /koniec.php
Disallow: /logowanie.php
Disallow: /napisz_recenzje.php
Disallow: /newsletter.php
Disallow: /panel_klienta.php
Disallow: /partner.php
Disallow: /platnosc_koniec.php
Disallow: /rejestracja.php
Disallow: /start.php
Disallow: /szukaj.php
Disallow: /wylogowanie.php
Disallow: /wyszukiwanie_zaawansowane.php
Disallow: /zamowienia_przegladaj.php
Disallow: /zamowienia_szczegoly.php
Disallow: /zamowienie_logowanie.php
Disallow: /zamowienie_podsumowanie.php
Disallow: /zamowienie_potwierdzenie.php
Disallow: /zamowienie_zmien_dane.php
Disallow: /zmiana_hasla.php

 

[jimmi]

powiesz szczerze że trochę się dzieje,

 

ostatnia część podlega tylko pod binga więc chyba  nie  o to chodziło.

 

google ma dostęp do wszystkiego

bing  do niczego 

a reszta nie może zobaczyć tych katalogów 

 

Disallow: /allegro/
Disallow: /boxy/
Disallow: /cache/
Disallow: /export/
Disallow: /harmonogram/
Disallow: /import/
Disallow: /inne/
Disallow: /javascript/
Disallow: /klasy/
Disallow: /listingi/
Disallow: /moduly/
Disallow: /moduly_stale/
Disallow: /pdf/
Disallow: /pobieranie/
Disallow: /programy/
Disallow: /szablony/
Disallow: /tcpdf/
Disallow: /ustawienia/
Disallow: /xml/
Disallow: /zarzadzanie/

[Rychu]

To dobrze że boty mają dostęp. Jedynie bing jest ograniczony bo strasznie obciążał stronę. Tylko pytanie czemu senuto jest komunikat że żaden bot nie ma dostępu...