Mis on Googlebot?
Googlebot on Google'i veebilehitsejate nimetus, mis koguvad teavet erinevate Google'i teenuste, sealhulgas nende otsinguindeksi jaoks.
Sellel on kaks peamist versiooni: Googlebot Desktop ja Googlebot Smartphone. Koos mobiilse indekseerimisega muutus Googlebot Smartphone Google'i otsinguindeksit käivitavaks peamiseks roomiks.
Niisiis, kuidas Googlebot töötab?
Googlebot krabab pidevalt veebi, et avastada uusi lehekülgi, saadab leheküljed töötlemiseks, et lisada need otsinguindeksisse, ja krabab lehekülgi uuesti, et otsida uut/uuendatud teavet.
Selle protsessi käigus järgib Googlebot rangelt robots.txt-failide reegleid ja juhiseid roomikutele lehekülgede ja linkide kohta.
Miks on Googlebot oluline?
Googlebot on üks peamisi tööriistu, mis panevad kogu Google'i otsingumootori tööle. Ilma selleta ei oleks kogu otsing (ja seega ka SEO) olemas. Kui Googlebot ei roomaks veebilehte, ei oleks see indekseeritud ja tulemustes nähtav.
Seega peavad SEO-spetsialistid ja veebimeistrid mõistma, kuidas Googlebot töötab. Peale selle on oluline tagada, et roomikprogramm pääseks saidile korralikult ligi ilma roomatavuse või leitavusega seotud probleemideta.
Parimad praktikad roomajasõbraliku veebisaidi loomiseks
Kui soovite, et Googlebot saaks teie veebilehe korralikult läbi krabada ja leheküljed indekseerida, peate tagama, et teatud asjad on paigas. Kuna see ei ole ühekordne sündmus, on allpool toodud mõned parimad tavad, mida tuleb regulaarselt järgida, et säilitada roomiksõbralik veebisait.
1. Kontrollige oma Robots.txt faili
Robots.txt fail veebilehel võimaldab teil kontrollida, mida krabitakse. See suhtleb robotitega, kasutades roomikute direktiive.
Peate tagama, et teie robots.txt fail ei keelaks Googlebotil indekseerida veebilehe lehti/osasid, mida soovite indekseerida.
Seejärel otsige failis robots.txt testimisvahendite abil mis tahes vigu.
Peaksite tagama, et robots.txt oleks Googlebotile kättesaadav, st et see ei oleks serveri tasandil blokeeritud.
2. Esitage asukohakaardid
Sitemapi esitamine on lihtsaim viis anda Google'ile teada, milliseid lehekülgi soovite, et neid indekseeritaks ja indekseeritaks.
Sitemapi loomine ei ole keeruline, kui kasutate WordPressi populaarset SEO-pikendusprogrammi, näiteks Yoast või Rank Math. Need loovad teie jaoks automaatselt sitemapid, mida saate esitada.
Genereeritud URL näeb välja selline: teiedomeeninimi.com/sitemap_index.html
Saitkaardi URL-i käsitsi esitamiseks peate külastama Google Search Console'i ja klõpsama peamenüüs jaotise "Index" all "Sitemaps".
3. Kasutage roomikute direktiive targalt
Lisaks robots.txt failile on olemas lehekülje tasandi direktiivid, mis teavitavad roomikutele, milliseid lehekülgi on lubatud (või keelatud) roomata.
Seega peate tagama, et lehekülgedel, mida soovite indekseerida, ei oleks direktiivi "noindex". Samamoodi veenduge, et neil ei ole direktiivi "nofollow", kui soovite, et ka nende väljaminevad lingid oleksid indekseeritud.
Saate kasutada SEO tööriistariba Chrome'ile ja Firefoxile, et kontrollida oma lehekülgede direktiive.
4. Anda lehekülgede vahelised siselinkid
Teine lihtne viis, kuidas aidata lehte kiiremini indekseerida, on selle linkimine teisele juba indekseeritud lehele. Kuna Googlebot vaatab lehti uuesti läbi, leiab ta sisemise lingi ja vaatab selle kiiresti läbi.
Peale roomamise annab sisemine linkimine lehekülgedele edasi nn "linkimahla", mis suurendab nende PageRanki.
5. Kasutage saidi auditit, et leida indekseeritavuse ja indekseeritavuse probleeme
Lõpuks saate kasutada saidi auditi vahendeid, et leida oma veebisaitide indekseeritavuse ja indekseeritavusega seotud probleeme.
Saitiaudit aitab teil leida katkised leheküljed, liigsed ümbersuunamised, ümbersuunamisahelad, indekseerimata leheküljed, nofollow-linkid, orvud leheküljed (need, millel puuduvad sisemised lingid) ja palju muud.
Saate jälgida oma veebisaidi SEO-seisundit tasuta selliste tööriistade abil nagu Ranktracker's Web Audit.
KKK
Kas roomamine ja indekseerimine on sama asi?
Ei, need kaks ei ole üks ja sama. Crawling tähendab lehekülgede ja linkide avastamist veebis. Indekseerimine tähendab roomamise käigus leitud lehekülgede sisu ja seoste salvestamist, analüüsimist ja korrastamist.
Alles pärast lehe indekseerimist on see saadaval, et seda saaks asjakohaste päringute tulemina kuvada.
Kas ma saan kontrollida, kas minu veebilehele ligipääsemiseks kasutatav veebimadakas on tõesti Googlebot?
Kui olete mures, et spämmerid või muud hädalised võivad teie veebisaidile ligi pääseda, väites end olevat Google'i robotid, saate kontrollida, kas see on tegelikult Google'i roomik.
Milline on Googlebot'i peamine roomik?
Googlebot nutitelefon on täna peamine roomik.
Kasutaja agendi sümbol: Googlebot
Täielik kasutajaagentide string: Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, nagu Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (ühilduv; Googlebot/2.1; +http://www.google.com/bot.html)
Googleboti roomikute täielik nimekiri on leitav siit.
