A Crawl Budget (feltérképezési keret) azt jelenti, hogy egy keresőmotor vagy AI-crawler adott idő alatt hány oldalt tud és hajlandó feltérképezni egy adott domainen – ez a keret nem korlátlan, és a weboldal méretétől, technikai állapotától és szerverkapacitásától is függ.

A crawl budget különösen nagy, több ezer oldalas webshopoknál vagy tartalmi archívumoknál válik kritikus kérdéssé: ha feleslegesen sok, alacsony értékű, duplikált vagy szűrt URL-variáció keletkezik, a crawler kevesebb erőforrást tud a valóban fontos oldalakra fordítani, ami azok ritkább újraindexeléséhez vezethet.

Gyakorlati példa: egy webshop, ahol egy kategóriaoldal szín, méret és ár szerinti szűrése több száz technikailag eltérő URL-t generál, könnyen elpazarolhatja a crawl budget jelentős részét ezeken a szűrt variációkon, ahelyett hogy a fontos termékoldalak gyakoribb újraindexelésére jutna erőforrás.

Kapcsolódó fogalmak: canonical URL, schema markup, Core Web Vitals.

Bővebben: technikai SEO teljes útmutatója.