Crawl budget
A crawl budget azt írja le, hogy egy kereső mennyi erőforrást és időt szán egy weboldal feltérképezésére egy adott időszakban. Egyszerűen fogalmazva: hány oldalt, milyen gyakran és milyen mélységig jár be a keresőrobot egy domainen belül.
A crawl budget nem egy fixen meghatározott szám, hanem dinamikusan alakul. Függ az oldal technikai állapotától, a frissítések gyakoriságától, a belső linkeléstől és attól is, hogy a kereső mennyire tartja értékesnek az adott weboldalt. Ha sok az alacsony értékű, duplikált vagy nehezen elérhető oldal, az elpazarolhatja a rendelkezésre álló feltérképezési kapacitást.
Fontos, hogy a crawl budget elsősorban nagyobb vagy összetettebb oldalaknál válik igazán relevánssá. Egy kisebb weboldal esetében ritkán jelent valódi korlátot, míg egy nagy tartalmi struktúránál komoly hatása lehet arra, hogy mi kerül időben indexelésre, és mi nem.
Más megnevezéssel gyakran így hivatkoznak rá:
- feltérképezési keret
- crawl kapacitás
- feltérképezési erőforrás