Što je Crawl budget?

Crawl budget ili proračun indeksiranja odnosi se na broj stranica na web stranici koje alati za indeksiranje tražilice smiju posjetiti u određenom vremenskom razdoblju.

Cilj postavljanja proračuna za indeksiranje je osigurati da tražilice učinkovito i djelotvorno indeksiraju web mjesto, bez previše opterećivanja poslužitelja web mjesta ili usporavanja procesa indeksiranja. Proračun indeksiranja određuje nekoliko čimbenika, uključujući veličinu web stranice, broj dolaznih poveznica te arhitekturu i sadržaj web stranice.