Google tilføjer nye Googlebot-crawlere: GoogleOther-Image og GoogleOther-Video

Intro

Google har introduceret to nye webcrawlere til Googlebot-familien:

• GoogleOther-billede

• GoogleOther-Video

Disse nye crawlere er designet til at forbedre crawlingen af binære data, som Google siger vil støtte forskning og udvikling.

Lær om AI's indvirkning på SEO og digital markedsføring.

Introduktion til de nye crawlere

De to nye crawlere, GoogleOther-Image og GoogleOther-Video, er optimerede versioner af GoogleOther til at hente henholdsvis billed- og videobytes. GoogleOther blev oprindeligt tilføjet i april 2023 for at blive brugt internt af Google-teams til at gennemgå det offentlige web og derved frigøre ressourcer til de vigtigste Googlebot-crawlere.

Opdag fordelene ved at integrere brugergenereret indhold.

GoogleOther-billede

GoogleOther-Image er den version af GoogleOther, der er skræddersyet til at hente offentligt tilgængelige billed-URL'er. Ifølge dokumentationen vil den fungere under brugeragent-tokens af GoogleOther-Image og GoogleOther. Den fulde brugeragentstreng vil være GoogleOther-Image/1.0.

Udforsk strategier til at forbedre indholdets nøjagtighed.

GoogleOther-Video

GoogleOther-Video er den version af GoogleOther, der er designet til at hente offentligt tilgængelige video-URL'er. I lighed med GoogleOther-Image vil den bruge brugeragent-tokens fra GoogleOther-Video og GoogleOther. Den fulde brugeragentstreng vil være GoogleOther-Video/1.0.

Læs om fremtiden for AI i digital reklame.

Formålet med de nye crawlere

Google lancerede disse nye crawlere for bedre at understøtte crawling af binære data, der kan bruges til forskning og udvikling. Dette initiativ har til formål at forbedre Googles evne til at håndtere billed- og videodata effektivt.

Forstå retningslinjernes rolle i AI-drevet markedsføring.

Oversigt over Google-crawlere

Google bruger forskellige typer af crawlere, herunder:

• Googlebot: Den vigtigste crawler for Googles søgeprodukter, som altid respekterer robots.txt-reglerne.

• Crawlere i særlige tilfælde: Disse crawlere udfører specifikke funktioner (f.eks. AdsBot) og respekterer måske eller måske ikke reglerne i robots.txt.

• Brugerudløste hentninger: Værktøjer og produktfunktioner, hvor slutbrugeren udløser en hentning. For eksempel vil Google Site Verifier eller nogle Google Search Console-værktøjer sende Google for at hente siden baseret på en brugerhandling.

Lær om at skabe indhold af høj kvalitet med AI.

Googles IP-adresseområder og DNS-masker

Google har listet IP-adresseområder og reverse DNS-masker for hver type crawler:

• Googlebot: googlebot.json (crawl----.googlebot.com eller geo-crawl----.geo.googlebot.com)

• Special-crawlere: special-crawlers.json (rate-limited-proxy----.google.com)

• Brugerudløste hentere: user-triggered-fetchers.json (---.gae.googleusercontent.com)

Udforsk etikken i AI i reklamer.

Hvorfor det er vigtigt

For dem, der overvåger crawling-aktiviteter og bot-aktivitet på deres websites, er det vigtigt at genkende disse nye GoogleOther-crawlere som legitime Googlebots. Når du ser aktivitet fra disse crawlere i dine logfiler, kan du være sikker på, at det er ægte og en del af Googles bestræbelser på at forbedre deres søge- og datahåndteringsfunktioner.

Forstå vigtigheden af indholdsbegrænsninger i AI-værktøjer.