Skocz do zawartości

Robots.txt a komenda disallow na rzecz indeksacji


Rekomendowane odpowiedzi

Witam,

Proszę o informację, czy takie zapisy widniejący w robots.txt może wpływać na nieindeksowanie większości podstron danego serwisu lub spadek liczby dotychczas zaindeksowanych (dane z GSC)? 

User-agent: *
Disallow: /*?kwota=
Disallow: /*?lng=
Disallow: /*?original=
Disallow: /*?ajax=
Disallow: /formularze
Disallow: /*.pdf$
Disallow: /*?frommobile=

 

Widniejące* 

Odnośnik do komentarza
Udostępnij na innych stronach

Pewnie o to, że spadek indeksacji powinien dotyczyć WYŁĄCZNIE podstron, do których blokujesz dostęp. Być może wkradł się jakiś błąd do zapisów w robots.txt dlatego skorzystaj z Search Console z opcji https://www.google.com/webmasters/tools/robots-testing-tool (wybierz z listy stronę, którą chcesz sprawdzić) i z formularza na samym dole, wpisując przykładowe adresy usuniętych z indeksu podstron. Sprawdzisz, czy przypadkiem i one nie są blokowane. 

 

Zerknij też do nowej wersji Search Console i skorzystaj z zakładki "Sprawdzenie adresu URL" wpisując adresy usuniętych podstron. 

Odnośnik do komentarza
Udostępnij na innych stronach

7 godzin temu, Lexy napisał:

Pewnie o to, że spadek indeksacji powinien dotyczyć WYŁĄCZNIE podstron, do których blokujesz dostęp. Być może wkradł się jakiś błąd do zapisów w robots.txt dlatego skorzystaj z Search Console z opcji https://www.google.com/webmasters/tools/robots-testing-tool (wybierz z listy stronę, którą chcesz sprawdzić) i z formularza na samym dole, wpisując przykładowe adresy usuniętych z indeksu podstron. Sprawdzisz, czy przypadkiem i one nie są blokowane. 

 

Zerknij też do nowej wersji Search Console i skorzystaj z zakładki "Sprawdzenie adresu URL" wpisując adresy usuniętych podstron. 

 

 

O widzisz, bardzo dziękuję. Już jest właściwszy kierunek poszukiwań. Wyświetliło mi się coś takiego: https://zapodaj.net/557acc6cff1d2.jpg.html

 

Czy może dotyczyć to kwestii użycia rel="canonical". Każda podstrona posiada canonical o wartości idealnie odwzorowującej adres URL, nawet jeżeli nie ma duplikatu contentu.

Odnośnik do komentarza
Udostępnij na innych stronach

Wydaje mi się, że w tym raporcie pojawiłoby się info o canonicalu, ale nie mam pewności. No ale na pewno nie jest to adres blokowany w robots.txt Sprawdź, czy przypadkiem nie wstawiłeś nofollow w linkach wewnętrznych. 

Odnośnik do komentarza
Udostępnij na innych stronach

Zarchiwizowany

Ten temat przebywa obecnie w archiwum. Dodawanie nowych odpowiedzi zostało zablokowane.

  • Ostatnio przeglądający   0 użytkowników

    • Brak zarejestrowanych użytkowników przeglądających tę stronę.
×
×
  • Dodaj nową pozycję...

Powiadomienie o plikach cookie

Umieściliśmy na Twoim urządzeniu pliki cookie, aby pomóc Ci usprawnić przeglądanie strony. Możesz dostosować ustawienia plików cookie, w przeciwnym wypadku zakładamy, że wyrażasz na to zgodę. Warunki użytkowania Polityka prywatności