Crawlt Google veel op uw site? Mogelijke problemen uitgelegd

Intro

Gary Illyes van Google heeft gewaarschuwd dat een plotselinge toename in het crawlen van sites kan wijzen op onderliggende problemen, zoals hacken of problemen met oneindige spaties.

Kruipende spikes begrijpen

Volgens Gary Illyes, een analist bij Google, moet een plotselinge toename in crawling-activiteit op uw website met voorzichtigheid worden benaderd. Hoewel het een positief teken lijkt, kan het vaak duiden op diepere problemen.

Illyes adviseert:

"Word niet te vroeg blij als zoekmachines onverwacht als gekken van je site beginnen te crawlen."

Er zijn twee veelvoorkomende problemen waar je op moet letten: oneindige ruimtes en website hacks.

Oneindige ruimtes en kruipende spikes

Oneindige ruimtes verwijzen naar delen van een website, zoals kalendermodules of eindeloos filterbare productlijsten, die onbeperkte potentiële URL's genereren. Hierdoor kunnen zoekmachinecrawlers overactief worden.

Illyes legt uit:

"Als je site over het algemeen pagina's heeft die zoekgebruikers nuttig vinden, zullen crawlers een tijdje enthousiast worden over deze oneindige ruimtes."

Om dit te beperken, raadt hij aan om het robots.txt-bestand te gebruiken om crawlers de toegang tot oneindige ruimtes te blokkeren.

Gehackte sites en Crawling-gekte

Een andere mogelijke oorzaak van meer crawling is een inbreuk op de beveiliging. Hackers kunnen spam injecteren op een gerenommeerde site, waardoor crawlers in eerste instantie worden misleid om wat lijkt op nieuwe inhoud te indexeren.

Illyes merkt op:

"Als een kwaadwillende er op de een of andere manier in slaagt om toegang te krijgen... kunnen ze je site overspoelen met, nou ja, rotzooi... crawlers zullen een tijdje enthousiast zijn over deze nieuwe pagina's en ze graag crawlen."

Reageren op kruipende pieken

Illyes stelt voor om onverwachte scherpe toenames in crawling te behandelen als een symptoom van mogelijke problemen totdat de hoofdoorzaak is geïdentificeerd.

"Behandel een onverwachte sterke toename van kruipen als een symptoom... totdat je het tegendeel kunt bewijzen. Of, weet je, misschien ben ik gewoon een harde pessimist."

Gehackte sites aanpakken

Illyes biedt een handleiding voor het omgaan met gehackte sites, met de nadruk op een systematisch herstelproces.

Tips uit de video van Google over het repareren van gehackte sites

1. Identificeer de kwetsbaarheid: Gebruik tools zoals de Webmasterhulpprogramma's van Google om problemen op te sporen.

2. Herstel de kwetsbaarheid: Dicht het beveiligingslek door software bij te werken, wachtwoorden te wijzigen, enz.

3. Maak de gehackte inhoud schoon: Verwijder spam, malware, beschadigde pagina's of andere injecties.

4. Beveiliging versterken: Implementeer extra beveiligingsmaatregelen zoals firewalls en regelmatige updates.

5. Een beoordeling aanvragen: Zodra de site schoon is, vraagt u Google om een beoordeling en verwijdert u eventuele beveiligingswaarschuwingen.

In de video van Google wordt benadrukt dat het beoordelingsproces sneller verloopt voor malwareproblemen dan voor spamproblemen.

Extra tips van John Mueller van Google

• Gebruik de URL-verwijderingstool: Deindexeer gehackte pagina's snel.

• Algehele kwaliteit van de site verbeteren: Richt u op het verbeteren van de kwaliteit van uw site en verwijder niet alleen gehackte inhoud.

• Verwacht aanhoudende gevolgen: Het kan maanden duren om het vertrouwen van Google volledig terug te winnen.

Het belang van websitebeveiliging

De beveiliging van een website is cruciaal voor het behoud van het vertrouwen van de gebruiker en de positie in zoekmachines. Plotselinge pieken in crawling-activiteit kunnen duiden op ernstige problemen die onmiddellijke aandacht vereisen.