Robots.txt: k čemu je a jak si jím nezavřít celý web
Jeden zapomenutý řádek a web zmizí z Googlu i ze Seznamu. Projděte si syntaxi robots.txt, pravidlo nejdelší shody i rozhodnutí, jestli pustit GPTBot.
Pilíř příručky
Aby vás vyhledávače našly
Robots.txt, sitemapa, kanonické adresy a přesměrování. Chyby v této oblasti umí vypnout celý web z vyhledávání.
Chcete vědět, jak je na tom váš web?
Kontrola projde web, najde konkrétní chyby z tohoto okruhu a u každé řekne, co s ní.