Mit jelent a crawl budget, és hogyan optimalizáljam?

Mit jelent a crawl budget, és hogyan optimalizáljam?

1️⃣ Probléma kontextus – miért kerül elő egyáltalán a crawl budget kérdése

A crawl budget tipikusan nem az elején fáj. Akkor válik témává, amikor a vállalkozó azt látja, hogy bizonyos oldalak lassan indexelődnek, mások meg mintha „eltűnnének”, vagy a frissítések hatása csak késve jelenik meg. Ilyenkor jön a kérdés: „lehet, hogy a Google nem járja be rendesen az oldalt?”

KKV-knál ez gyakran egy növekedési ponton bukkan fel. Több tartalom, több aloldal, webshopnál több termék, szűrők, paraméterek. A weboldal bővült, de a Google figyelme nem nőtt vele arányosan. Ez üzletileg azért kellemetlen, mert a fontos oldalak nem kapják meg időben azt a láthatóságot, amit várnál.

Egy 2023-as európai technikai SEO kutatás szerint a közepes méretű weboldalak jelentős részénél nem az a gond, hogy „nincs crawl budget”, hanem az, hogy rossz dolgokra megy el. Ez már optimalizálási kérdés, nem elméleti fogalom.

2️⃣ Valós okok – mit jelent valójában a crawl budget

A crawl budget leegyszerűsítve azt jelenti, hogy a Google mennyi figyelmet hajlandó egy weboldalra fordítani egy adott időszakban. Ez nem fix szám, és nem is valami, amit egy gombbal be lehet állítani. Inkább egy dinamikus keret.

A Google azt figyeli: mennyire stabil az oldal, mennyi értelmes tartalmat talál, mennyi hibába fut bele, és mennyire érdemes rendszeresen visszajönni. Ha sok a zaj – üres oldalak, paraméteres URL-ek, duplikációk –, akkor a crawl budget elfolyik ezekre.

Kutatások szerint – például egy 2022-es crawl efficiency elemzés alapján – a Googlebot idejének jelentős része olyan URL-ekre megy el, amelyek üzletileg és SEO szempontból irrelevánsak. Nem rosszindulatból, hanem mert az oldal struktúrája ezt sugallja.

3️⃣ Mikor igaz / mikor nem – mikor valódi probléma a crawl budget

Fontos tisztázni: a crawl budget nem mindenkinél kritikus tényező. Egy 20–50 oldalas weboldalnál szinte biztos, hogy nem ez a szűk keresztmetszet. Ilyenkor más gond van, csak könnyű erre ráfogni.

Valódi problémává akkor válik, amikor sok az URL: több száz, több ezer aloldal, webshop, blog archívum, szűrők, címkék, paraméterek. Itt már számít, hogy a Google mire fordítja az idejét, és mire nem.

Egy 2021-es indexelési viselkedéskutatás szerint a crawl budget problémák leginkább ott jelentkeznek, ahol az oldal technikai értelemben nagyobb, mint amennyire strukturált. Nem a méret önmagában a gond, hanem a rendezetlenség.

4️⃣ Tipikus hibák – amit a vállalkozók rendszeresen elrontanak

Az egyik leggyakoribb hiba, hogy minden URL-t egyformán fontosnak kezelnek. Nincs szelekció. A Google viszont szelektál, és ha nem segítesz neki, ő dönt helyetted – nem mindig üzleti logika mentén.

Szintén tipikus hiba a paraméterek elszabadulása. Szűrők, rendezések, session ID-k külön URL-eken, amik mind feltérképezhetők. Ezek SEO-értéket nem hordoznak, mégis viszik a crawl kapacitást.

A harmadik hiba az, hogy nem nézik a feltérképezési visszajelzéseket. A Google Search Console világosan mutatja, mely oldalak vannak feltérképezve, indexelve, vagy épp „feltérképezve – nem indexelve” állapotban. Ezek nem technikai apróságok, hanem prioritási jelzések.

5️⃣ Rendszerszintű megközelítés – hogyan optimalizálható a crawl budget valójában

360° SEO szemléletben a crawl budget optimalizálása nem tiltásokkal kezdődik, hanem struktúrával. A Google azt szereti, ha világos, mi a fontos, és mi a mellékes. Ezt az URL-struktúra, a belső linkelés és a sitemap együtt kommunikálja.

Ha a fontos oldalak közel vannak a főoldalhoz, sok releváns belső link mutat rájuk, és kevés a technikai zaj, a Google természetes módon oda koncentrálja a feltérképezést. Nem kell „kikényszeríteni”, elég irányítani.

Egy 2022-es technikai SEO rendszerkutatás szerint a crawl budget optimalizálásának legnagyobb hatása nem a gyorsabb feltérképezés, hanem a stabilabb indexelés. Kevesebb „elveszett” oldal, kevesebb bizonytalanság a rangsorban.

6️⃣ Gyakorlati iránytű – mit tegyél KKV-ként reálisan

Első lépésként nézd meg, mire megy el a Google figyelme. Milyen URL-ek jelennek meg a feltérképezési riportokban? Ezek közül melyek fontosak üzletileg, és melyek csak technikai melléktermékek?

Második lépésként segíts a fókuszálásban. Erős belső linkelés a kulcsoldalak felé, tiszta sitemap, és ott tiltás vagy noindex, ahol valóban nincs SEO-érték. Nem mindent kell indexeltetni ahhoz, hogy az oldal erős legyen.

Amit nem érdemes várni: hogy a crawl budget optimalizálása látványos, gyors forgalomnövekedést hoz. Ez nem kampány, hanem háttérrendezés. Viszont KKV-knál pont ez a jelentősége: amikor a Google végre nem felesleges köröket fut, hanem arra figyel, ami üzletileg számít, a SEO sokkal kiszámíthatóbbá válik. És ez az a pont, ahol a növekedés már nem szerencse kérdése.