Google opdaterer dokumentation om crawlbudget med konservativ standard

Google har omskrevet sin dokumentation om crawlbudget, og den ændring, der betyder mest for store hjemmesider, står nu klart: hver hjemmeside starter på den samme konservative crawlgrænse, og Google hæver den kun, hvis behovet er der, og hjemmesiden forbliver sund. Den opdaterede side gør det også klart, at denne grænse deles af alle Googles crawlere, så en enkelt ressourcekrævende crawler kan efterlade mindre kapacitet til resten.

Det, der er sket

Google opdaterede sin side “Optimér dit crawlbudget” den 22. juli 2026. Den omskrevne dokumentation siger nu: “Hver hjemmeside starter med den samme standardmæssige, konservative crawlkapacitetsgrænse. Hvis der er behov for at crawle mere, og hjemmesiden forbliver sund, justerer Googles systemer automatisk denne grænse over tid.”

Siden præciserer også, hvordan budgettet fordeles. Ifølge Google: “Selvom hver crawler har forskelligt crawlbehov, deles crawlkapacitetsgrænsen af alle crawlere. Det betyder, at højt behov fra én crawler kan reducere den kapacitet, der er til rådighed for de andre.” Googlebot, AdsBot og Google Shopping-crawleren trækker alle på den samme pulje, og Google bemærker, at behovet fra AdsBot og Shopping stiger, når en hjemmeside kører dynamiske annoncemål eller har produkter i sine merchant feeds.

Google gentager, hvem det angår. Vejledningen begrænser emnet til “store hjemmesider (1 million+ unikke sider) med indhold, der ændrer sig moderat ofte” og “mellemstore eller større hjemmesider (10.000+ unikke sider) med meget hurtigt skiftende indhold”. Mindre hjemmesider bliver ifølge Google i forvejen crawlet effektivt. Opdateringen lægger også mere vægt på serverens sundhed og anbefaler hurtigere svartider og understøttelse af statuskoden 304 (Not Modified), så Google kan genbruge en cachet kopi af en side, der ikke har ændret sig.

Hvorfor det betyder noget

Crawlbudgettet afgør, hvor hurtigt Google opdager nye sider og opdaterer eksisterende. For et brand med tusindvis af lokationssider, en butiksfinder og et produktkatalog på ét domæne er den hastighed forskellen mellem, at en ny butik viser korrekte åbningstider allerede på åbningsdagen, og at den halter en uge bagefter. Et konservativt udgangspunkt plus delt kapacitet betyder, at crawlbudgettet er en ressource, man skal styre, ikke en rettighed, og en hjemmeside, der spilder det på dublerede eller langsomme sider, har mindre tilbage til de sider, der skaber omsætning.

Hvad det betyder for virksomheder med flere lokationer

For et centralt marketing- eller webteam er opgaven at holde op med at bruge crawlbudget på sider, der ikke har brug for det, og speede dem op, der har. Det betyder at holde lokations- og produktdata rene ved kilden, så sider ikke svinger frem og tilbage mellem versioner, at samle eller fjerne tynde og dublerede URL’er (facetfiltre, sporingsparametre, næsten tomme lokationssider) og at sikre, at serveren svarer hurtigt og returnerer 304, når intet har ændret sig. Konsistente, velstrukturerede lokale virksomhedsprofiler og en korrekt indekseret butiksfinder er det, der lader Googlebot bruge sit begrænsede budget på de sider, der konverterer. Behandl det som en styringsopgave inden for enterprise SEO på tværs af hele porteføljen, ikke en rettelse side for side.

Every site starts with the same default, conservative crawl capacity limit. If there is demand to crawl more and the site remains healthy, Google’s systems will automatically adjust this limit over time.

Google for Developers

Kort sagt

Google har nu skrevet reglerne ned: budgetter starter små, vokser med dokumenteret behov og deles mellem hver crawler, der rammer dit domæne. For store hjemmesider med mange lokationer er det vindende træk lidet glamourøst: hurtigere servere, renere URL’er og korrekte data ved kilden, så de sider, der betyder noget, bliver crawlet først.