Menu

Crawl budget optimalizálás: mit indexeljen (és mit ne) a Google?

---

Miért nem látja a Google az összes oldaladat?

Képzeld el, hogy egy hatalmas könyvtárban vagy, ahol percenként ezernyi új könyv érkezik, de csak egyetlen könyvtáros dolgozik, akinek véges az ideje. Pontosan ez történik a weboldalad és a Googlebot között is. A keresőmotorok erőforrásai nem végtelenek: minden webhelyre jut egy meghatározott „időkeret”, amit crawl budget-nek, azaz feltérképezési keretnek nevezünk.

Sok webhelytulajdonos ott követi el a hibát, hogy hagyja a Google-t „eltévedni” a jelentéktelen oldalak rengetegében. Ha a bot értéktelen tartalomra pazarolja a figyelmét, a valódi üzleti értéket képviselő aloldalaid talán soha nem kerülnek be a találati listára. Ebben a cikkben megmutatjuk, hogyan fókuszáld a Google figyelmét azokra a tartalmakra, amelyek ténylegesen bevételt generálnak.

---

Mi az a Crawl Budget és miért kritikus a SEO szempontjából?

A crawl budget (feltérképezési keret) az a maximális oldalszám, amelyet egy keresőmotor botja egy adott időintervallum alatt meglátogat és feldolgoz a weboldaladon. Ezt két fő tényező határozza meg:

1. Crawl Capacity Limit: Mennyire terhelhető a szervered? Ha lassú az oldal, a Google visszavesz a tempóból.
2. Crawl Demand: Mennyire népszerű és friss a tartalom? A népszerű oldalak több figyelmet kapnak.

Kinek fontos ez igazán?

A kisebb blogoknál a Google általában mindent lefed, de ha webshopod van több ezer termékkel, vagy egy nagy portált kezelsz, a crawl budget optimalizálás a túlélés záloga.

---

Mit indexeljen a Google? A prioritási lista

A stratégia lényege a szelektálás. Nem minden oldal érdemli meg a bot figyelmét.

1. Bevételtermelő kategória- és termékoldalak

Ezek a legfontosabbak. Győződj meg róla, hogy ezek az oldalak mindössze 2-3 kattintásra vannak a főoldaltól. A mélyen elásott linkeket a Google ritkábban látogatja.

2. Magas minőségű blogposztok és útmutatók

Az információs keresési szándék kielégítése építi a bizalmat (E-E-A-T). Ezek az oldalak vonzzák a legtöbb külső hivatkozást, ami növeli az egész domain tekintélyét.

3. Jogi és kapcsolati oldalak

Bár nem hoznak közvetlen eladást, a Google szemében a hitelességet (Trust) bizonyítják.

---

Mit NE indexeljen a Google? A „keretfalók” kiszűrése

A legnagyobb hiba, ha hagyod, hogy a Googlebot „szeméttel” telítődjön. Íme a listát azokról az elemekről, amelyeket érdemes kizárni vagy korlátozni:

• Belső keresési eredmények: Soha ne engedd indexelni a keresési találati oldalakat. Ez végtelen számú URL-t generálhat.
• Faszetált navigáció és szűrők: Ha egy webshopban minden szín- és méretkombináció külön URL-t kap, az felemészti a keretedet. Használj canonical tageket vagy robots.txt tiltást.
• Duplikált tartalmak: A „nyomtatható verziók” vagy session ID-k által generált duplikátumok zavart okoznak.
• 404-es hibaoldalak: A törött linkek nemcsak a felhasználót dühítik fel, hanem a bot idejét is rabolják.

Tartalom típusa	SEO státusz	Teendő
Fő termékoldalak	Indexelésre javasolt	Internal linking erősítése
Szűrt találati listák	Tiltandó	robots.txt: Disallow
Kosár, Pénztár	Tiltandó	noindex tag használata
Archívum (üres)	Törlendő	410 Gone vagy 301 redirect

---

5 technikai lépés a crawl budget optimalizáláshoz

1. Sebesség mindenek felett

A gyorsabb szerver válaszidő (TTFB) azt jelenti, hogy a Googlebot egységnyi idő alatt több oldalt tud letölteni. Ha az oldalad lassú, a bot „elfárad” és távozik.

2. A Robots.txt precíz beállítása

Ez a fájl az első, amit a bot megnéz. Itt tiltsd le a fejlesztői mappákat, az admin felületet és a felesleges URL-paramétereket.

3. Az XML oldaltérkép (Sitemap) karbantartása

Csak a 200 OK állapotkódú, indexelni kívánt oldalak szerepeljenek benne. A sitemap legyen naprakész és tiszta.

4. A láncolt átirányítások (Redirect Chains) megszüntetése

Ha az A oldal a B-re, a B pedig a C-re mutat, a Googlebot kétszer annyi erőforrást használ el. Irányíts mindent közvetlenül a végcélra.

5. Árva oldalak (Orphan Pages) felszámolása

Az olyan oldalak, amelyekre nem mutat belső link, nehezen felfedezhetők. Használj olyan eszközöket, mint a Screaming Frog, hogy megtaláld ezeket.

---

A „Crawl Efficiency” mutató

Sokan csak a büdzsére figyelnek, de a sikeres SEO titka a hatékonyság. Egy kevéssé ismert, de zseniális trükk: nézd meg a Google Search Console „Feltérképezési statisztikák” jelentését. Ha azt látod, hogy a Googlebot nagy százalékban 304 Not Modified választ kap, az jó jel: a tartalmad nem változott, de a Google ellenőrizte. Azonban, ha rengeteg 404 vagy non-indexable oldalt látogat, az tiszta veszteség.

Szakértői tipp: Ne csak azt kérdezd, mit lásson a Google, hanem azt is: milyen gyakran? A statikus tartalomhoz (pl. „Rólunk” oldal) ritkább frissítési igényt állíts be az oldaltérképben, így több marad a friss hírekre.

---

Gyakori kérdések (FAQ)

Mennyi crawl budgetet kap egy új weboldal?

Az új oldalak kezdetben alacsonyabb keretet kapnak. Ahogy épül a linkprofil és nő a tartalom minősége, a Google bizalma és a ráfordított idő is növekszik.

A noindex tag megmenti a crawl budgetet?

Nem feltétlenül. A Googlebotnak előbb le kell töltenie az oldalt, hogy lássa a noindex utasítást. Ha spórolni akarsz a kerettel, a robots.txt a hatékonyabb megoldás a tiltásra.

Okozhat-e gondot a túl sok kép?

Igen, ha nincsenek optimalizálva. A hatalmas fájlméret lassítja a botot. Használj WebP formátumot és adj meg egyedi alt szövegeket a SEO javításához.

---

Vedd át az irányítást a botok felett!

A crawl budget optimalizálása nem egyszeri feladat, hanem folyamatos gondozást igényel. Ha tisztán tartod a webhelyed struktúráját, és csak az értékes tartalmat kínálod fel a keresőmotoroknak, a jutalmad gyorsabb indexelés és jobb helyezés lesz.

Szeretnéd tudni, hogy a te oldaladat hatékonyan térképezi-e fel a Google? Kezdd a technikai auditot még ma, és takarítsd ki a felesleges URL-eket!