Краулинговый бюджет
Краулинговый бюджет — количество страниц сайта, которое поисковый робот готов обойти за определённое время.
Для небольших сайтов это не проблема, но для крупных каталогов (магазины, автозапчасти, недвижимость) важно, чтобы робот тратил бюджет на ценные страницы, а не на дубли и мусор.
Экономят краулинговый бюджет закрытием бесполезных страниц от индексации, устранением дублей, корректной перелинковкой и актуальным sitemap.
Признаки проблем: в GSC растёт «Просканировано, но не проиндексировано», новые товары долго не попадают в индекс, обход идёт по фильтрам и параметрам.
Решение начинается с аудита: какие URL генерирует сайт, сколько из них нужны в индексе. SEOSCANUM при крауле показывает масштаб проблемы на реальных данных.
Смотрите также
Проверьте свой сайт за пару минут
Запустите бесплатное демо-аудита — увидите главные проблемы без оплаты и без подписки.