Googlebot je vyhledávací robot Googlu, který prochází weby a načítá obsah pro index. Co dělá, jaké má typy a jak ho řídit přes robots.txt a sitemapu.
Googlebot je vyhledávací robot společnosti Google, který prochází weby, načítá jejich obsah a předává ho k zařazení do indexu. Je to program, díky kterému Google objevuje a aktualizuje stránky ve vyhledávání.
Pochopení toho, jak Googlebot funguje, je základ technického SEO. V tomto slovníkovém článku vám jako SEO specialista vysvětlím, co Googlebot je, co dělá a jak ho řídit.
Co je Googlebot
Googlebot je název pro vyhledávacího robota (crawlera) společnosti Google. Je to automatizovaný program, který neustále prochází internet, navštěvuje webové stránky, načítá jejich obsah a předává ho do systému, kde se vyhodnocuje a zařazuje do indexu Googlu.
Díky Googlebotu Google objevuje nové stránky, zaznamenává změny na existujících a udržuje svůj index aktuální. Lze si ho představit jako neúnavného návštěvníka, který chodí po webech po odkazech a čte jejich obsah.
Googlebot postupuje z jedné stránky na druhou hlavně po odkazech a podle sitemap. To, co Googlebot projde a načte, se teprve může objevit ve výsledcích vyhledávání – stránka, kterou nenavštíví, se nezaindexuje.
Pochopení Googlebotu je proto základem technického SEO, protože celá viditelnost ve vyhledávání začíná tím, že robot váš obsah najde, projde a pochopí.
Googlebot vs crawler
Googlebot je konkrétní crawler, ale crawlerů existuje víc. Vztah shrnuje tabulka:
| Pojem | Význam |
|---|---|
| Crawler (robot) | Obecné označení procházejícího programu |
| Googlebot | Konkrétní crawler Googlu |
| Seznambot | Crawler vyhledávače Seznam |
Co Googlebot dělá
Googlebot plní ve vyhledávání zásadní roli – zajišťuje procházení (crawling). Postupuje po odkazech z jedné stránky na druhou, načítá obsah stránek a sleduje, co je na nich nového nebo změněného.
Načtený obsah pak předává k vyhodnocení a případnému zařazení do indexu. Googlebot zároveň respektuje pokyny, které mu dáváte – například robots.txt (kam smí), meta robots (zda stránku indexovat) nebo sitemapu (které URL jsou důležité).
Frekvence, s jakou Googlebot web navštěvuje, závisí na jeho důležitosti, aktuálnosti a technickém stavu; často aktualizované a kvalitní weby navštěvuje častěji. Googlebot tedy zajišťuje první krok celého procesu – aby se obsah vůbec dostal do hry.
Pochopení toho, co Googlebot dělá, vám pomohe vnímat, že před indexací a pozicemi je tu procházení, a že usnadnit Googlebotu práci (čistá struktura, sitemapa, rychlý web) pomáhá celé viditelnosti.
Typy Googlebota
Googlebot není jen jeden – existuje v několika variantách pro různé účely. Hlavní je Googlebot pro procházení běžných webových stránek, který dnes funguje primárně jako mobilní (kvůli mobile-first indexování, viz dále).
Vedle něj existují specializované varianty, například Googlebot pro obrázky (prochází a indexuje obrázky), pro videa nebo pro novinky. Každá varianta se zaměřuje na svůj typ obsahu.
Pro běžné SEO je nejdůležitější hlavní Googlebot procházející stránky. Je dobré vědět, že se tyto varianty liší, hlavně pokud řešíte indexaci obrázků nebo specifického obsahu.
Googlebot se také představuje určitým identifikátorem (user-agent), podle kterého ho lze rozpoznat. Pochopení, že existuje víc variant Googlebota, vám pomohe v případě potřeby řídit procházení konkrétního typu obsahu.
Pro většinu webů ale stačí myslet na hlavního Googlebota, který prochází běžné stránky a na kterém stojí jejich indexace.
Jak Googlebota řídit
Procházení Googlebotem můžete do určité míry řídit a usměrňovat. Soubor robots.txt mu říká, které části webu má a nemá procházet.
Meta robots na úrovni stránky určuje, zda se má stránka indexovat. XML sitemapa Googlebotu napoví, které URL jsou důležité, a pomáhá je objevit.
Rychlost a zdraví serveru ovlivňují, jak rychle a kolik toho Googlebot zvládne projít. Pomáhá i čistá struktura webu a kvalitní interní prolinkování, díky kterému Googlebot snáz najde obsah.
Cílem je usnadnit Googlebotu práci a nasměrovat ho na to podstatné, ne na balast. Více o tom, jak řídit procházení, najdete v článku robots.txt nastavení.
Pochopení, jak Googlebota řídit, vám pomohe zajistit, aby procházel a indexoval právě ty stránky, na kterých vám záleží, a neztrácel čas na nepodstatných adresách.
Mobile-first a Googlebot
Důležitá změna se týká toho, že Googlebot dnes prochází weby primárně jako mobilní zařízení – v rámci takzvaného mobile-first indexování. To znamená, že Google hodnotí a indexuje váš web hlavně podle jeho mobilní verze, kterou Googlebot načítá jako mobilní robot.
Pro vás z toho plyne, že mobilní verze webu musí být plnohodnotná – pokud se na mobilu zobrazuje méně obsahu nebo se web špatně načítá, projeví se to na indexaci a pozicích. Googlebot tedy „vidí“ váš web tak, jak ho vidí mobilní uživatel.
Proto je důležité dbát na responzivní design, rychlost a úplnost obsahu na mobilu. Pochopení vztahu mezi Googlebotem a mobile-first vám pomohe uvědomit si, že to, co Googlebot načte z mobilní verze, rozhoduje o vaší viditelnosti.
Mobilní verze už není druhořadá – je to ta, podle které Googlebot a Google web hodnotí.
Jak ověřit a sledovat Googlebota
Jak Googlebot váš web prochází, můžete sledovat a ověřovat. Hlavním nástrojem je Google Search Console, kde v reportech o procházení a indexování vidíte, jak Googlebot web navštěvuje, kolik stránek prochází a zda nenarazil na chyby.
Nástroj Kontrola URL navíc ukáže, jak Googlebot konkrétní stránku vidí. V serverových logách lze sledovat návštěvy Googlebota podle jeho identifikátoru (user-agent), ale pozor – tento identifikátor mohou předstírat i podvodní roboti, takže pravost Googlebota lze ověřit přes jeho IP adresy.
Pro běžné SEO postačí sledování v Search Console. Pravidelná kontrola vám ukáže, zda Googlebot prochází web bez problémů a zda se k důležitým stránkám dostává.
Pochopení, jak Googlebota sledovat, vám pomohe odhalit problémy s procházením včas – například když robot naráží na chyby nebo se k části webu nedostane.
Časté chyby kolem Googlebota, které vídám
Při auditech narážím na opakující se problémy:
- blokace důležitých sekcí v robots.txt (Googlebot je nenačte),
- neúplná mobilní verze, kterou Googlebot hodnotí,
- pomalý server omezující procházení,
- blokované CSS a JS, kvůli kterým Googlebot web špatně vykreslí,
- nesledování procházení a chyb v Search Console.
Související pojmy
Googlebot souvisí s několika pojmy z technického SEO. Úzce se pojí s procházením (crawlingem) a crawlerem, s indexací, s crawl budgetem, s robots.txt a sitemapou a s mobile-first indexováním.
Pro pochopení technického SEO se vyplatí znát i tyto navazující pojmy. Více vysvětlení najdete v dalších heslech slovníku, například Co je meta robots.
Googlebot je v podstatě brána, kterou váš obsah vstupuje do vyhledávání – bez jeho návštěvy se stránka nezaindexuje. Když rozumíte tomu, co Googlebot je a jak ho řídit, dokážete zajistit, aby procházel a indexoval právě to, na čem vám záleží, a aby se k vašemu obsahu dostal bez problémů.
Googlebot tak patří k základním pojmům technického SEO, protože celá viditelnost ve vyhledávání začíná tím, že tento robot váš web najde, projde a pochopí.
Proč na Googlebotu záleží
Googlebot je robot, který prochází weby a načítá obsah pro index Googlu – je to první krok k tomu, aby se vaše stránky objevily ve vyhledávání. Stránka, kterou nenavštíví, se nezaindexuje.
Vyplatí se proto usnadnit mu práci čistou strukturou, sitemapou, rychlým serverem a plnohodnotnou mobilní verzí (kvůli mobile-first). Sledujte procházení v Search Console a hlídejte, že se Googlebot dostane k důležitým stránkám.
Je to základ technického SEO.
- Googlebot je vyhledávací robot Googlu, který prochází weby.
- Načítá obsah pro index – co neprojde, se nezaindexuje.
- Řídíte ho robots.txt, meta robots a sitemapou.
- Prochází weby primárně jako mobilní (mobile-first).
Chcete mít jistotu, že Googlebot prochází váš web správně? Rád to prověřím v rámci SEO analýzy nebo komplexní optimalizace webových stránek.
Často kladené otázky
Co je Googlebot?
Vyhledávací robot společnosti Google – automatizovaný program, který prochází weby, načítá jejich obsah a předává ho k zařazení do indexu. Díky němu Google objevuje a aktualizuje stránky ve vyhledávání.
Co Googlebot dělá?
Prochází weby po odkazech, načítá obsah stránek a sleduje změny, pak obsah předává k vyhodnocení a indexaci. Respektuje přitom pokyny jako robots.txt, meta robots a sitemapu. Frekvence návštěv závisí na důležitosti a aktuálnosti webu.
Jak Googlebota řídím?
Souborem robots.txt (kam smí), meta robots (zda indexovat), sitemapou (důležité URL) a celkovou strukturou a rychlostí webu. Cílem je usnadnit mu práci a nasměrovat ho na podstatné stránky, ne na balast.
Prochází Googlebot weby jako mobil?
Ano, dnes prochází weby primárně jako mobilní zařízení v rámci mobile-first indexování. Google hodnotí web hlavně podle mobilní verze, takže ta musí být plnohodnotná, jinak to ovlivní indexaci a pozice.
Jak poznám, že web navštívil Googlebot?
V Google Search Console v reportech o procházení a indexování, případně v serverových logách podle identifikátoru (user-agent). Pozor, identifikátor mohou předstírat i podvodní roboti – pravost lze ověřit přes IP adresy.
Co když Googlebot nemůže projít můj web?
Pak se stránky nezaindexují. Příčinou bývá blokace v robots.txt, pomalý server, blokované CSS a JS nebo technické chyby. Zkontrolujte procházení v Search Console a odstraňte překážky, aby se Googlebot k obsahu dostal.
