Crawl budget czyli inaczej budżet indeksowania odnosi się do liczby stron na witrynie internetowej, które wyszukiwarka jest w stanie zeskanować i zaindeksować w określonym czasie. Jest to ważny aspekt dla optymalizacji pod kątek SEO, ponieważ bezpośrednio wpływa na to, jak szybko i jak dokładnie treść strony jest dostępna dla użytkowników wyszukiwarki. Zarządzanie budżetem indeksowania jest szczególnie istotne dla dużych witryn z tysiącami stron, gdzie łatwo o przegapienie wartościowych treści przez ograniczenia zasobów indeksujących wyszukiwarki.
Budżet indeksowania może być zwiększany lub zmniejszany na podstawie kilku kluczowych czynników, w tym: