Co to jest crawl budget?
Crawl budget - na czym polega i na co wpływa?
Crawl budget - to liczba podstron witryny, które w określonym czasie zostaną odwiedzone i zaindeksowane przez robota Google. Nie wiemy, w jaki sposób Google przypisuje budżet indeksowania do danej strony, ale najbardziej prawdopobne jest, że kieruje się wielkością strony, liczbą linków przychodzących oraz ogólną, poprawną optymalizacji witryny, także pod względem występujących błędów.
Nie można wpłynąć na swój crawl budżet, ale można podjąć działania, które zapobiegną “marnowaniu” tego budżetu. Powinno nam zależeć na tym, aby każde odwiedziny robota kończyły się indeksowaniem kolejnych podstron, a przeszkodzić w tym mogą m.in. takie czynniki jak: zbyt długie oczekiwanie na odpowiedź serwera, błędy na stronie, nieistniejące linki itp. Inną kwestią jest marnowanie budżetu na indeksowanie stron, które nie mają wartości w wyszukiwarce, np. strona logowania lub koszyk. Warto więc wykluczać strony. Można też posłużyć się mapą strony, aby naprowadzić robota na najbardziej wartościowe strony.
Autor
Cezary Urbanowicz, SEO Manager, Widoczni