Mikä on Crawl Budget?
Ryöstöbudjetti on aika- ja resurssimäärä, jonka hakukone käyttää tietyn verkkosivuston ryöstämiseen. Toisin sanoen se on enimmäismäärä sivuja, jonka hakukone voi indeksoida sivustollasi tietyn ajan kuluessa. Kierrätysbudjetti voi vaihdella eri hakukoneiden (tai indeksoijien) välillä.
Googlen mukaan sinun ei pitäisi huolehtia indeksointibudjetista, ellei:
- Sivustollasi on yli miljoona ainutlaatuista sivua, joiden sisältö vaihtuu noin kerran viikossa.
- Sinulla on keskikokoinen verkkosivusto (noin 10 000 sivua), jonka sisältöä vaihdetaan usein (päivittäin).
- Sinulla on uutissivusto.
- Search Console luokittelee suurimman osan sivustosi URL-osoitteista muotoon "Discovered - currently not indexed".
Kullekin verkkosivustolle myönnetään erilainen indeksointibudjetti, joka perustuu kahteen päätekijään:
- Ryömiminen Kysyntä: Määritellään sivujen lukumäärän, julkaisu-/päivitystiheyden ja sivujen suosion perusteella.
- Crawl Rate Limit: Vaikuttaa palvelimen ominaisuuksiin, sivuston omistajan Search Consolessa asettamaan crawl-rajaan, hakukoneen crawl-rajaan ja Googlen automaattisiin mukautuksiin, jotka perustuvat palvelimen vasteaikoihin.
Miksi ryömintätalousarvio on tärkeä?
Kierrätysbudjetti on tärkeä, koska se vaikuttaa siihen, kuinka monta sivua Googlebot voi kierrättää sivustollasi ja kuinka usein Googlebot voi kierrättää sivusi uudelleen päivittääkseen indeksinsä. Googlella on valtavat resurssit, mutta se ei silti pysty indeksoimaan (ja indeksoimaan säännöllisesti uudelleen) kaikkia Internetin sivuja. Tämän vuoksi Google jakaa sivustoille indeksointibudjetin.
Varmistaaksesi, että indeksointibudjettisi ei mene hukkaan merkityksettömiin sivuihin, keskity optimoimaan verkkosivustosi indeksoinnin tehokkuutta.
Miten lisätä indeksointibudjettia?
1. Nopeuta palvelintasi ja lyhennä sivujen latausaikoja.
Palvelimen vasteaika ja sivun latausnopeus vaikuttavat suoraan indeksointiin. Kun Googlebot indeksoi sivustosi, se lataa ensin resurssit ja käsittelee ne sitten. Jos palvelimesi reagoi nopeasti, Googlebot voi indeksoida enemmän sivuja verkkosivustollasi.
- Käytä nopeaa ja luotettavaa web-hosting-palvelua ja sisällönjakeluverkkoa (CDN) palvelimen alkuperäisen vasteajan parantamiseksi.
- Vähennä sivun latausaikoja estämällä suurten mutta ei-kriittisten resurssien indeksointi robots.txt-tiedoston avulla, välttämällä pitkiä uudelleenohjausketjuja ja poistamalla raskaat ja huonosti koodatut teemat ja laajennukset.
2. Lisää linkkejä
Sivulle johtavien linkkien määrä osoittaa sen merkityksen Googlelle. Googlebot indeksoi ensisijaisesti sivut, joilla on enemmän takalinkkejä ja sisäisiä linkkejä. Lisää indeksointibudjettia lisäämällä sivuillesi enemmän ulkoisia ja sisäisiä linkkejä.
- Sisäistä linkitystä koskevia ehdotuksia saat tarkastamalla verkkosivustosi esimerkiksi Ranktrackerin Site Audit -työkalulla.
3. Korjaa rikkinäiset linkit ja vähennä uudelleenohjauksia
Liian monet rikkinäiset sisäiset linkit (404- tai 410-vastauskoodit) ja uudelleenohjatut URL-osoitteet (3xx) voivat tuhlata sivustosi indeksointibudjettia. Korjaa rikkinäiset linkit ja tarpeettomat uudelleenohjaukset optimoidaksesi indeksointibudjettisi.
- Käytä työkaluja, kuten Ranktrackerin Site Audit, löytääksesi rikkinäiset ja uudelleenohjaavat URL-osoitteet sivustollasi.
4. Käytä indeksointi-API:tä, jos mahdollista
Indeksointi-API:n avulla voit ilmoittaa Googlelle suoraan, kun lisäät, poistat tai päivität sivuja sivustollasi. Tämä auttaa saamaan sivusi indeksoitua nopeammin.
- Huomautus: Indeksointirajapinta on tällä hetkellä käytettävissä tietyissä käyttötapauksissa, kuten live-videoissa ja työpaikkailmoituksissa.
UKK
Kunnioittaako Googlebot Robots.txt-tiedoston indeksointiviivettä?
Ei, Googlebot ei noudata robots.txt-tiedoston crawl-viiveasetuksia.
Milloin sinun pitäisi huolehtia ryömintätalousarviosta?
Sinun kannattaa huolehtia indeksointibudjetista, jos sinulla on erittäin suuri sivusto (yli 1 miljoona sivua) tai keskikokoinen sivusto, jonka sisältö muuttuu hyvin usein (päivittäin). Useimpien sivustojen ei tarvitse huolehtia indeksointibudjetista.
Miten voin tarkistaa verkkosivustoni indeksointibudjetin?
Tarkkaa lukua ryömintätalousarviosta ei löydy mistään. Voit kuitenkin tarkistaa yleiskatsauksen Googlen indeksointitoiminnasta Google Search Console -palvelun Crawl Stats -raportista.
Jos haluat lisää tietoa verkkosivustosi hakukoneoptimoinnin ja indeksoinnin tehokkuuden parantamisesta, käy Ranktrackerin blogissa ja tutustu kattavaan hakukoneoptimoinnin oppaaseemme. Tutustu lisäksi keskeisiin SEO-termeihin ja -käsitteisiin SEO-sanastossamme.
