Miért égeted a Google erőforrásait?

O

A modern SEO (keresőoptimalizálás) világában 2026-ban már nem csak az a kérdés, hogy van-e tartalom az oldaladon, hanem az is, hogy a Googlebot eljut-e hozzá. A crawl budget, vagyis a feltérképezési keret, az az erőforrásmennyiség, amit a keresőmotorok egy adott időszak alatt a webhelyed feltérképezésére szánnak. Ha az oldalad tele van technikai szeméttel, a botok értékes időt pazarolnak el, mielőtt rátalálnának a valóban fontos aloldalaidra.

A crawl budget rendbetétel nem csupán “takarítás”; ez egy stratégiai befektetés. Egy elhanyagolt struktúra miatt a friss cikkek napokig vagy hetekig láthatatlanok maradhatnak. Ebben az útmutatóban megmutatjuk, hogyan irányítsd a Google figyelmét oda, ahol a valódi érték van.

Mi befolyásolja a feltérképezési keretet 2026-ban?

A Google algoritmusai ma már sokkal szelektívebbek. A crawl budget két fő pilléren nyugszik:

1. Crawl Limit (Kapacitás): Mennyit bír el a szervered anélkül, hogy lelassulna?
2. Crawl Demand (Igény): Mennyire népszerű és friss az oldalad?

Ha a szervered lassú, a Googlebot visszavesz a tempóból. Ha az oldalad tele van duplikációkkal, a bot “megunja” az ismétléseket.

A crawl budget rendbetétel 10 kritikus lépése

1. Az “Indexelési Zombik” kiirtása

A legtöbb weboldal 30-40%-a olyan aloldal, amelynek semmi keresési forgalma nincs. Ezek a paraméterezett URL-ek, régi szűrőoldalak vagy felesleges címkék.

• Teendő: Használd a Search Console-t az alacsony értékű oldalak azonosítására.
• Tipp: Ami nem hoz látogatót és nem segíti a konverziót, azt tedd noindex listára vagy töröld végleg.

2. A belső linkstruktúra és a kattintási mélység javítása

A Googlebot a linkeken keresztül közlekedik. Ha egy fontos oldalad 4-5 kattintásra van a főoldaltól, kicsi az esélye, hogy gyakran frissüljön az indexben.

• Optimalizálás: Törekedj arra, hogy minden fontos tartalom elérhető legyen maximum 3 kattintással.
• LSI kulcsszó: A hatékony belső linkstruktúra javítása közvetlenül növeli a feltérképezési sebességet.

3. HTTP hibák és átirányítási láncok felszámolása

Minden 404-es hiba egy zsákutca a botnak. Minden 301-es átirányítási lánc (A -> B -> C) extra erőforrást igényel.

• Audit: Futtass egy technikai SEO elemzést havonta. Szüntesd meg a láncokat, és mutassanak a linkek közvetlenül a végcélra.

4. A robots.txt stratégiai használata

Ne hagyd, hogy a Googlebot mindenhova benézzen. A /wp-admin/, a belső keresési találatok vagy a fejlesztői könyvtárak tiltása alapvető.

Szakértői megjegyzés: 2026-ban a Googlebot már figyelembe veszi a “Crawl-delay” direktívát is bizonyos esetekben, de a legjobb módszer a szükségtelen útvonalak teljes lezárása.

5. Az oldalsebesség és a Core Web Vitals

A gyors szerver = boldog Googlebot. Ha az oldalad 200ms alatt válaszol, a bot több oldalt tud meglátogatni ugyanannyi idő alatt.

6. A JavaScript renderelés és a “Render Budget” optimalizálása

2026-ban a Googlebot már kiválóan futtatja a JavaScriptet, de ez hatalmas számítási kapacitást igényel tőle. A crawl budget mellett létezik egy úgynevezett render budget is. Ha az oldalad túlzottan támaszkodik a kliensoldali renderelésre, a Googlebot először csak a HTML-t olvassa be, és a tartalom érdemi részét egy későbbi, második körben indexeli.

• A megoldás: Használj Server-Side Rendering (SSR) vagy Static Site Generation (SSG) technológiát. Ezáltal a bot azonnal készen kapja a tartalmat, nem kell várnia a scriptek lefutására, így több energiája marad az aloldalak felfedezésére.
• Technikai SEO (keresőoptimalizálás) tipp: Ellenőrizd a Search Console “URL ellenőrzés” eszközével, hogy a Google pontosan azt látja-e a renderelt képen, amit a felhasználó.

7. URL paraméterek és a faceted navigation (szűrőrendszerek) kezelése

A webshopok legnagyobb crawl budget ellensége a végtelen számú szűrő (szín, méret, árkategória, rendezés). Egyetlen termékkategóriának akár több ezer variációja is létrejöhet az URL paraméterek miatt (pl. ?color=blue&size=m&sort=price_asc), ami egy “végtelen csapdát” állít a Googlebotnak.

• Kezelés: Használd a robots.txt-t a felesleges paraméterek kizárására, vagy állíts be kanonikus (canonical) tageket.
• Gyakori hiba: Sokan a noindex taget használják a szűrőkre, de a botnak ahhoz is le kell töltenie az oldalt, hogy lássa a direktívát – ez tehát továbbra is fogyasztja a keretet. A robots.txt-vel való tiltás hatékonyabb erőforrás-megtakarítás.

8. Logfájl-elemzés: A láthatatlan adatok kincsesbányája

A Search Console csak egy szeletet mutat a valóságból. A valódi crawl budget rendbetétel a szerver logfájljainak elemzésével kezdődik. Itt láthatod feketén-fehéren, hogy a Googlebot melyik másodpercben melyik URL-t hívta le, és milyen választ kapott.

• Mire figyelj? Keresd azokat az URL-eket, amiket a bot mániákusan látogat, de számodra nincs üzleti értékük.
• Trendek 2026-ban: Használj AI-alapú log-elemző szoftvereket, amelyek automatikusan felismerik a bot-anomáliákat és a “pazarolt” feltérképezési mintákat.

9. A “Crawl Discovery” és az elárvult oldalak (Orphan Pages) felszámolása

Az elárvult oldalak olyan aloldalak, amelyekre egyetlen belső link sem mutat, de a webhelytérképben vagy régi külső hivatkozásokban még szerepelnek. A Googlebot néha rájuk talál, de mivel nincsenek a struktúrába ágyazva, zavart okoznak az algoritmusnak az oldal fontossági sorrendjét illetően.

• Stratégia: Futtass egy crawler szoftvert (pl. Screaming Frog), és hasonlítsd össze a talált URL-eket az oldaltérképeddel.
• Teendő: Vagy linkeld be ezeket az oldalakat releváns helyekről, vagy szüntesd meg őket véglegesen (410-es kód), hogy ne terheljék a rendszert.

10. A gyorsítótárazás (Caching) és a “If-Modified-Since” header

Ha a Googlebot visszatér egy oldalra, és az nem változott az utolsó látogatás óta, felesleges újra letöltenie a teljes tartalmat. A HTTP headerek megfelelő beállítása drasztikusan csökkentheti a bot sávszélesség-felhasználását.

• Optimalizálás: Állítsd be a szervereden az If-Modified-Since HTTP fejlécet. Ha a tartalom változatlan, a szerver egy 304 Not Modified választ küld.
• Eredmény: A Googlebot azonnal továbblép a következő oldalra anélkül, hogy az adatforgalmat generált volna. Ez a crawl budget rendbetétel egyik leginkább alulértékelt, mégis leghatékonyabb technikai lépése.

Elhanyagolt vs. Optimalizált feltérképezés

Egyedi perspektíva: A “Content Decay” és a crawl budget kapcsolata

Sokan elkövetik azt a hibát, hogy csak az új tartalomra fókuszálnak. Azonban a régi, elavult cikkek frissítése vagy összevonása (Content Pruning) az egyik leghatékonyabb módja a crawl budget rendbetételének. 2026-ban a Google többre értékeli a 100 darab, tűpontos és friss oldalt, mint az 1000 darab elavult, 2018-as bejegyzést.

Pro tipp: Ha frissítesz egy régi cikket, adj hozzá új belső linkeket. Ez jelzi a Googlebotnak, hogy érdemes újra és újra visszatérnie.

Gyakori kérdések (FAQ)

Milyen gyakran kell a crawl budget-et ellenőrizni?

Nagyobb webshopoknál hetente, kisebb blogoknál negyedévente javasolt egy teljes technikai audit.

A képek befolyásolják a feltérképezési keretet?

Igen, a túlméretezett képek lassítják az oldalbetöltést, ami miatt a Googlebot kevesebb erőforrást tud az indexelésre szánni. Használj modern formátumokat (WebP, Avif).

Segít a Sitemap.xml a crawl budget-ben?

Igen, a pontos, csak 200 OK állapotkódú URL-eket tartalmazó oldaltérkép a bot iránytűje.

Kezdd el a takarítást még ma!

A crawl budget rendbetétel nem egyszeri feladat, hanem egy folyamatos higiéniai folyamat. Egy tisztább, gyorsabb és logikusabb weboldal nemcsak a keresőmotoroknak, hanem a látogatóknak is jobb élményt nyújt.

Vágj bele a technikai auditba most, és biztosítsd, hogy 2026-ban a te tartalmaid kerüljenek az élre!