Ce este Crawl Budget?
Bugetul de căutare este cantitatea de timp și de resurse pe care un motor de căutare o alocă pentru căutarea unui anumit site web. Cu alte cuvinte, acesta reprezintă numărul maxim de pagini pe care un motor de căutare le poate parcurge pe site-ul dvs. într-un anumit interval de timp. Bugetul de accesare poate varia în funcție de diferitele motoare de căutare (sau crawlere).
Google afirmă că nu ar trebui să vă faceți griji cu privire la bugetul de crawl decât dacă:
- Site-ul dvs. are peste 1 milion de pagini unice, cu un conținut care se schimbă aproximativ o dată pe săptămână.
- Aveți un site web de dimensiuni medii (aproximativ 10.000 de pagini) și schimbați frecvent (zilnic) conținutul.
- Conduceți un site de știri.
- Search Console clasifică majoritatea URL-urilor site-ului dvs. ca fiind "Descoperite - în prezent neindexate".
Fiecare site web primește un buget de acces diferit în funcție de doi factori principali:
- Cererea de târâre: Definită prin numărul de pagini, frecvența de publicare/actualizare și popularitatea paginilor.
- Limitaratei de căutare: influențată de capacitățile serverului, de limita de căutare setată de proprietarul site-ului în Search Console, de limita de căutare a motorului de căutare și de ajustările automate efectuate de Google pe baza timpilor de răspuns ai serverului.
De ce este important bugetul Crawl?
Bugetul de căutare este important deoarece afectează numărul de pagini pe care Googlebot le poate căuta pe site-ul dvs. și frecvența cu care Googlebot poate căuta din nou paginile dvs. web pentru a-și actualiza indexul. Google dispune de resurse uriașe, dar nu poate răsfoi (și nu poate răsfoi periodic) toate paginile de internet. Prin urmare, Google alocă un buget de căutare pentru site-urile web.
Pentru a vă asigura că bugetul de căutare nu este irosit pe pagini neimportante, concentrați-vă pe optimizarea eficienței de căutare a site-ului dumneavoastră.
Cum să măriți bugetul de crawl?
1. Accelerați-vă serverul și reduceți timpul de încărcare a paginilor
Timpul de răspuns al serverului și viteza de încărcare a paginilor afectează în mod direct crawling-ul. Atunci când Googlebot parcurge site-ul dvs., acesta descarcă mai întâi resursele și apoi le procesează. Dacă serverul dvs. răspunde rapid, Googlebot poate parcurge mai multe pagini de pe site-ul dvs. web.
- Utilizați un serviciu de găzduire web rapid și fiabil și o rețea de livrare de conținut (CDN) pentru a îmbunătăți timpul de răspuns inițial al serverului.
- Reduceți timpii de încărcare a paginilor prin împiedicarea răscolitului resurselor mari, dar necritice, utilizând robots.txt, evitând lanțurile lungi de redirecționare și eliminând temele și pluginurile grele și prost codate.
2. Adăugați mai multe linkuri
Numărul de linkuri către o pagină indică importanța acesteia pentru Google. Googlebot acordă prioritate la parcurgerea paginilor cu mai multe backlink-uri și link-uri interne. Creșteți bugetul de crawl adăugând mai multe linkuri externe și interne la paginile dumneavoastră.
- Pentru sugestii de legături interne, auditați-vă site-ul web cu instrumente precum Ranktracker's Site Audit.
3. Corectarea legăturilor rupte și reducerea redirecționărilor
Prea multe linkuri interne rupte (coduri de răspuns 404 sau 410) și URL-uri redirecționate (3xx) pot irosi bugetul de căutare al site-ului dvs. Remediați legăturile rupte și redirecționările inutile pentru a vă optimiza bugetul de accesare.
- Folosiți instrumente precum Ranktracker's Site Audit pentru a găsi URL-uri rupte și redirecționate pe site-ul dvs.
4. Utilizați API de indexare, dacă este posibil
API de indexare vă permite să notificați direct Google ori de câte ori adăugați, eliminați sau actualizați pagini de pe site-ul dvs. Acest lucru ajută la o căutare mai rapidă a paginilor dumneavoastră.
- Notă: API-ul de indexare este disponibil în prezent pentru cazuri de utilizare specifice, cum ar fi videoclipurile în direct și anunțurile de angajare.
Întrebări frecvente
Respectă Googlebot întârzierea Crawl-Delay din Robots.txt?
Nu, Googlebot nu respectă setările de amânare a accesării aplicați într-un fișier robots.txt.
Când ar trebui să vă intereseze bugetul de crawl?
Ar trebui să vă intereseze bugetul de căutare dacă operați un site foarte mare (peste 1 milion de pagini) sau un site de dimensiuni medii cu modificări foarte frecvente (zilnice) ale conținutului. Cele mai multe site-uri nu trebuie să-și facă griji cu privire la bugetul de crawl.
Cum pot verifica bugetul Crawl pentru site-ul meu?
Nu veți găsi nicăieri cifra exactă pentru bugetul pentru târâre. Cu toate acestea, puteți verifica imaginea de ansamblu a activității de căutare Google în raportul Crawl Stats din Google Search Console.
Pentru mai multe informații despre îmbunătățirea SEO și a eficienței de căutare a site-ului dvs. web, vizitați blogul Ranktracker și explorați ghidul nostru SEO cuprinzător. În plus, familiarizați-vă cu termenii și conceptele cheie SEO în Glosarul nostru SEO.
