Kas ir Google robots?
Googlebot ir nosaukums Google tīmekļa pārlūkiem, kas vāc informāciju dažādiem Google pakalpojumiem, tostarp meklēšanas indeksam.
Tam ir divas galvenās versijas: Googlebot Desktop un Googlebot Smartphone. Līdz ar mobilo ierīču indeksēšanu Googlebot Smartphone kļuva par galveno pārlūku, kas nodrošina Google meklēšanas indeksu.
Kā darbojas Google robots?
Google robots nepārtraukti pārmeklē tīmekli, lai atrastu jaunas lapas, nosūta lapas apstrādei, lai tās pievienotu meklēšanas indeksam, un atkārtoti pārlūko lapas, lai meklētu jaunu/atjauninātu informāciju.
Šī procesa laikā Google robotsbots stingri ievēro robots.txt failu noteikumus un lapas un saites rāpotājiem paredzētās direktīvas.
Kāpēc Googlebots ir svarīgs?
Googlebots ir viens no galvenajiem rīkiem, kas nodrošina visu Google meklētājprogrammas darbību. Bez tā visa meklēšana (un līdz ar to arī SEO) nevarētu pastāvēt. Ja Googlebot neapmeklētu vietni, tā netiktu indeksēta un nebūtu redzama rezultātos.
Tāpēc SEO speciālistiem un tīmekļa vietņu administratoriem ir jāsaprot, kā darbojas Google robots. Turklāt ir svarīgi nodrošināt, lai pārlūks pareizi piekļūtu vietnei, neradot pārlūkojamības vai atrodamības problēmas.
Labākā prakse, lai izveidotu ērtu un ērtu tīmekļa vietni
Ja vēlaties, lai Google robots pareizi pārmeklētu jūsu vietni un indeksētu lapas, ir jānodrošina, ka ir izpildītas noteiktas prasības. Tā kā tas nav vienreizējs pasākums, turpmāk ir aprakstītas dažas no labākajām praksēm, kas regulāri jāievēro, lai uzturētu ērtu tīmekļa vietni, kas piemērota pārlūkošanai.
1. Pārbaudiet savu Robots.txt failu
Robots.txt fails tīmekļa vietnē ļauj kontrolēt, kas tiek pārmeklēts. Tas sazinās ar robotiem, izmantojot rāpošanas direktīvas.
Jānodrošina, lai robots.txt fails neaizliedz Google robotam pārmeklēt vietnes lapas/adaļas, kuras vēlaties indeksēt.
Pēc tam meklējiet kļūdas failā, izmantojot robots.txt testēšanas rīkus.
Jānodrošina, ka robots.txt ir pieejams Google robotam, t. i., tas nav bloķēts servera līmenī.
2. Vietņu karšu iesniegšana
Vietņu karšu iesniegšana ir visvienkāršākais veids, kā paziņot Google, kuras lapas vēlaties, lai tās tiktu pārmeklētas un indeksētas.
Vietņu karšu izveide nav sarežģīta, ja izmantojat kādu populāru WordPress SEO spraudni, piemēram, Yoast vai Rank Math. Tie automātiski izveidos jums vietņu kartes, kuras varat iesniegt.
Izveidotais URL izskatās šādi: yourdomainname.com/sitemap_index.html
Lai manuāli iesniegtu vietnes kartes URL, jāapmeklē Google meklēšanas konsole un galvenās izvēlnes sadaļā "Indekss" noklikšķiniet uz "Vietnes kartes".
3. Pārdomāti izmantojiet Rīkotāja direktīvas
Papildus robots.txt failam ir arī lapas līmeņa direktīvas, kas rāpotājiem norāda, kuras lapas drīkst (vai nedrīkst) pārmeklēt.
Tāpēc jums ir jānodrošina, lai lapām, kuras vēlaties indeksēt, netiktu pievienota direktīva "noindex". Tāpat pārliecinieties, ka tām nav "nofollow" direktīvas, ja vēlaties, lai tiktu pārlūkoti arī to izejošie saiti.
Lai pārbaudītu direktīvus savās lapās, varat izmantot pārlūkprogrammu Chrome un Firefox SEO rīku joslu.
4. Nodrošiniet iekšējās saites starp lapām
Vēl viens vienkāršs veids, kā palīdzēt lapai ātrāk indeksēties, ir saistīt to ar citu lapu, kas jau ir indeksēta. Tā kā Googlebot pārlūko lapas atkārtoti, tas atradīs iekšējo saiti un ātri to pārlūko.
Papildus pārlūkošanai iekšējās saites nodod tā saukto "saišu sulu" lapām, tādējādi palielinot to PageRank.
5. Izmantojiet vietnes auditu, lai atrastu pārlūkojam ības un indeksējamības problēmas
Visbeidzot, varat izmantot vietnes audita rīkus, lai atklātu problēmas, kas saistītas ar tīmekļa vietņu indeksējamību un pārlūkojamību.
Vietnes audits var palīdzēt jums atrast bojātas lapas, pārmērīgas pāradresācijas, pāradresāciju ķēdes, neindeksētas lapas, saites, kas nav pievienotas, bezvēstures lapas (lapas bez iekšējām saitēm) un daudz ko citu.
Jūs varat bez maksas uzraudzīt savas vietnes SEO stāvokli, izmantojot tādus rīkus kā Ranktracker tīmekļa audits.
Biežāk uzdotie jautājumi
Vai pārlūkošana un indeksēšana ir viens un tas pats?
Nē, tie nav viens un tas pats. Pārmeklēšana nozīmē lapu un saišu atklāšanu tīmeklī. Indeksēšana attiecas uz pārlūkošanas laikā atrastā satura un saišu starp lapām saglabāšanu, analīzi un sakārtošanu.
Tikai pēc tam, kad lapa ir indeksēta, to var parādīt kā rezultātu attiecīgajiem pieprasījumiem.
Vai es varu pārbaudīt, vai tīmekļa pārlūks, kas piekļūst manai vietnei, patiešām ir Googlebot?
Ja esat nobažījies, ka jūsu vietnei var piekļūt surogātpasta sūtītāji vai citi problēmu radītāji, kas uzdodas par Google robotiem, varat pārbaudīt, vai pārlūks patiešām ir Google pārlūks.
Kāds ir Google robota galvenais pārlūks?
Googlebot viedtālrunis šodien ir galvenais pārlūks.
Lietotāja aģenta simbols: Googlebot
Pilna lietotāja aģenta virkne: Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, kā Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (saderīgs; Googlebot/2.1; +http://www.google.com/bot.html)
Pilnu Google robota pārlūkošanas rīku sarakstu var atrast šeit.
