Crawl budget to termin używany w SEO, który odnosi się do liczby stron, które roboty wyszukiwarek mogą przeszukać w określonym czasie. Efektywne wykorzystanie crawl budgetu zapewnia, że roboty skupiają się na najwartościowszych stronach, co może poprawić widoczność i indeksowanie strony w wynikach wyszukiwania. Jeśli witryna ma zbyt wiele stron niskiej jakości lub duplikatów, prowadzi to do marnowania crawl budgetu i spowolnienia indeksowania ważniejszych treści, co negatywnie wpływa na jej SEO. Optymalizacja crawl budgetu polega na zapewnieniu, że roboty wyszukiwarek skoncentrują się na stronach o wysokiej wartości i unikną niepotrzebnych lub mniej istotnych treści.
Crawl budget możemy optymalizować między innymi dzięki technice przycinania treści, znanej jako Content pruning. Technika ta obejmuje odświeżanie, łączenie bądź usuwanie treści. Przygotowaliśmy specjalny artykuł na ten temat, któremu warto poświęcić uwagę.