Co je Crawl Budget?
Rozpočet na procházení je množství času a prostředků, které vyhledávač přidělí na procházení konkrétních webových stránek. Jinými slovy je to maximální počet stránek, které může vyhledávač na vašem webu prohledat v určitém časovém rámci. Rozpočet na procházení se může u různých vyhledávačů (nebo crawlerů) lišit.
Google uvádí, že byste se neměli starat o rozpočet na procházení, pokud:
- Váš web má více než 1 milion unikátních stránek s obsahem, který se mění přibližně jednou týdně.
- Máte středně velký web (přibližně 10 tisíc stránek) a často (denně) měníte obsah.
- Provozujete zpravodajský web.
- Služba Search Console klasifikuje většinu adres URL vašeho webu jako "Objevené - v současné době neindexované".
Každé webové stránce je přidělen jiný rozpočet na procházení na základě dvou hlavních faktorů:
- Poptávka po prolézání: Definuje se počtem stránek, četností zveřejňování/aktualizací a popularitou stránek.
- Limit rychlosti procházení: Ovlivněn možnostmi serveru, limitem procházení nastaveným vlastníkem webu v konzole pro vyhledávání, limitem procházení vyhledávače a automatickými úpravami společnosti Google na základě doby odezvy serveru.
Proč je důležitý rozpočet na procházení?
Rozpočet na procházení je důležitý, protože ovlivňuje, kolik stránek na vašem webu může robot Google procházet a jak často může robot Google znovu procházet vaše webové stránky, aby aktualizoval svůj index. Google má k dispozici obrovské zdroje, přesto nemůže procházet (a pravidelně znovu procházet) všechny stránky na internetu. Proto společnost Google přiděluje webovým stránkám rozpočet na procházení.
Abyste zajistili, že váš rozpočet na procházení nebude vyplýtván na nedůležité stránky, zaměřte se na optimalizaci efektivity procházení webu.
Jak zvýšit rozpočet na procházení?
1. Zrychlení serveru a zkrácení doby načítání stránek
Doba odezvy serveru a rychlost načítání stránek přímo ovlivňují procházení. Když robot Googlebot prochází vaše stránky, nejprve stahuje zdroje a poté je zpracovává. Pokud váš server reaguje rychle, může robot Googlebot procházet více stránek na vašem webu.
- Použijte rychlou a spolehlivou webhostingovou službu a síť pro doručování obsahu (CDN), abyste zlepšili počáteční dobu odezvy serveru.
- Snižte dobu načítání stránek tím, že zabráníte procházení velkých, ale nekritických zdrojů pomocí souboru robots.txt, vyhnete se dlouhým řetězcům přesměrování a odstraníte těžká a špatně nakódovaná témata a pluginy.
2. Přidání dalších odkazů
Počet odkazů na stránku udává její důležitost pro Google. Googlebot přednostně prochází stránky s větším počtem zpětných a interních odkazů. Zvyšte rozpočet na procházení přidáním více externích a interních odkazů na své stránky.
- Pro návrhy interního propojení proveďte audit svých webových stránek pomocí nástrojů, jako je Ranktracker's Site Audit.
3. Oprava nefunkčních odkazů a snížení počtu přesměrování
Příliš mnoho nefunkčních interních odkazů (kódy odezvy 404 nebo 410) a přesměrovaných adres URL (3xx) může plýtvat rozpočtem na procházení webu. Opravte nefunkční odkazy a zbytečná přesměrování, abyste optimalizovali rozpočet na procházení.
- Pomocí nástrojů, jako je například Audit stránek společnosti Ranktracker, můžete na svých stránkách najít nefunkční a přesměrované adresy URL.
4. Pokud je to možné, použijte rozhraní API pro indexování
Rozhraní API pro indexování umožňuje přímo informovat společnost Google o každém přidání, odebrání nebo aktualizaci stránek na webu. To pomáhá rychlejšímu procházení vašich stránek.
- Poznámka: Rozhraní API pro indexování je v současné době k dispozici pro specifické případy použití, jako jsou živá videa a pracovní nabídky.
Nejčastější dotazy
Respektuje Googlebot prodlevu při procházení v souboru Robots.txt?
Ne, Googlebot nerespektuje nastavení zpoždění procházení použité v souboru robots.txt.
Kdy byste se měli zajímat o rozpočet na procházení?
Rozpočet na procházení by vás měl zajímat, pokud provozujete velmi rozsáhlý web (více než 1 milion stránek) nebo středně velký web s velmi častými (každodenními) změnami obsahu. Většina webů se o rozpočet na procházení starat nemusí.
Jak mohu zkontrolovat rozpočet procházení pro své webové stránky?
Přesné číslo pro rozpočet na prolézání nikde nenajdete. Přehled o aktivitě vyhledávání Google však můžete zkontrolovat v sestavě Crawl Stats v konzole Google Search Console.
Další informace o zlepšení SEO a efektivity procházení vašich webových stránek najdete na blogu Ranktracker a v našem komplexním průvodci SEO. Kromě toho se seznamte s klíčovými termíny a pojmy SEO v našem slovníku SEO.
