Indeksowanie

Robots.txt i noindex — jaka jest różnica?

Czas czytania: 6 min

Robots.txt kontroluje możliwość pobierania części zasobów, a noindex informuje, że dana strona nie powinna pojawiać się w indeksie.

Robots.txt

Dyrektywa Disallow może ograniczyć crawling, ale nie jest równoznaczna z usunięciem adresu z indeksu.

Meta robots noindex lub odpowiedni nagłówek X-Robots-Tag służy do wykluczania strony z indeksu.

Jeśli zablokujesz crawling, Google może nie zobaczyć noindex. Dlatego warto stosować te mechanizmy świadomie.

Audyt Seomatic pokaże problemy techniczne i pomoże ustalić, co warto poprawić w pierwszej kolejności.