Google legger til nye Googlebot Crawlers: GoogleOther-Image og GoogleOther-Video

Intro

Google har introdusert to nye webcrawlere til Googlebot-familien:

• GoogleOther-Image

• GoogleOther-Video

Disse nye crawlerne er utviklet for å forbedre gjennomsøkingen av binære data, noe Google sier vil støtte forskning og utvikling.

Lær mer om hvordan AI påvirker SEO og digital markedsføring.

Introduksjon til de nye Crawlers

De to nye crawlerne, GoogleOther-Image og GoogleOther-Video, er optimaliserte versjoner av GoogleOther for å hente henholdsvis bilde- og videobytes. GoogleOther ble opprinnelig lagt til i april 2023 for å brukes internt av Google-team til å gjennomsøke det offentlige nettet, og dermed frigjøre ressurser for de viktigste Googlebot-crawlerne.

Oppdag fordelene ved å integrere brukergenerert innhold.

GoogleOther-Image

GoogleOther-Image er den versjonen av GoogleOther som er skreddersydd for å hente offentlig tilgjengelige bilde-URL-er. I henhold til dokumentasjonen vil den operere under brukeragent-tokenene GoogleOther-Image og GoogleOther. Den fullstendige brukeragentstrengen vil være GoogleOther-Image/1.0.

Utforsk strategier for å forbedre innholdets nøyaktighet.

GoogleOther-Video

GoogleOther-Video er den versjonen av GoogleOther som er utviklet for å hente offentlig tilgjengelige video-URL-er. I likhet med GoogleOther-Image vil den bruke brukeragent-tokens for GoogleOther-Video og GoogleOther. Den fullstendige brukeragentstrengen vil være GoogleOther-Video/1.0.

Les om fremtiden for kunstig intelligens i digital annonsering.

Formålet med de nye Crawlerne

Google lanserte disse nye crawlerne for å gi bedre støtte til crawling av binære data som kan brukes til forskning og utvikling. Målet med dette initiativet er å forbedre Googles evne til å håndtere bilde- og videodata på en effektiv måte.

Forstå hvilken rolle retningslinjer spiller i AI-drevet markedsføring.

Oversikt over Google Crawlers

Google bruker ulike typer crawlere, blant annet:

• Googlebot: Hovedcrawleren for Googles søkeprodukter, som alltid respekterer robots.txt-reglene.

• Spesialtilfeller av crawlere: Disse crawlerne utfører spesifikke funksjoner (for eksempel AdsBot) og respekterer kanskje ikke reglene i robots.txt.

• Brukerutløste hentere: Verktøy og produktfunksjoner der sluttbrukeren utløser en henting. For eksempel vil Google Site Verifier eller noen Google Search Console-verktøy sende Google for å hente siden basert på en brukerhandling.

Lær mer om hvordan du skaper innhold av høy kvalitet med kunstig intelligens.

Googles IP-adresseområder og DNS-masker

Google har listet opp IP-adresseområder og omvendte DNS-masker for hver type crawler:

• Googlebot: googlebot. json (crawl----.googlebot.com eller geo-crawl----.geo.googlebot.com)

• Spesial-crawlere: special-crawlers.json (rate-limited-proxy----.google.com)

• Brukerutløste hentere: user-triggered-fetchers.json (---.gae.googleusercontent.com)

Utforsk etikken rundt kunstig intelligens i reklame.

Hvorfor dette er viktig

For de som overvåker crawling-aktiviteter og bot-aktivitet på nettstedene sine, er det viktig å gjenkjenne disse nye GoogleOther-crawlerne som legitime Googlebots. Når du ser aktivitet fra disse crawlerne i loggfilene dine, kan du være sikker på at den er ekte og en del av Googles arbeid med å forbedre søke- og datahåndteringskapasitetene sine.

Forstå viktigheten av innholdsbegrensninger i AI-verktøy.