Heslo ve slovníčku
Googlebot
Stručně
Robot, kterým Google prochází weby. Od roku 2023 stahuje výhradně mobilní verzi stránek.
Jak se chová
- Respektuje robots.txt a při chybě 503 procházení zpomalí.
- Stahuje výhradně mobilní verzi. Obsah, který na mobilu není, pro Google neexistuje.
- Frekvence návštěv se řídí tím, jak často se obsah mění a jak je web důležitý.
Kdy se s ním setkáte v logu
V logu serveru se pozná podle identifikátoru obsahujícího Googlebot. Nárazové zvýšení počtu požadavků obvykle znamená, že jste přidali hodně nových adres, nebo že se web dostal do potíží s parametrickými adresami.
Časté dotazy
Jak ověřím, že jde o skutečného Googlebota?
Podle identifikátoru v hlavičce to nepoznáte, dá se snadno podvrhnout. Ověření se dělá zpětným a dopředným překladem IP adresy: adresa musí patřit do domény googlebot.com nebo google.com. Google zveřejňuje i seznam svých rozsahů adres.
Spouští Googlebot JavaScript?
Ano, ale se zpožděním. Nejdřív zpracuje HTML a teprve když má volnou kapacitu, stránku vykreslí. Odstup bývá hodiny až dny, takže obsah dodaný skriptem se do indexu dostane později než zbytek.
Týká se to vašeho webu?
Kontrola projde web a řekne, jestli tenhle problém máte. Trvá to necelou minutu.