Начать бесплатноНачать
Начать бесплатноВойти
Продукт
Возможности
Все возможностиТехнический аудитАудит на данных GSC/ЯндексПриоритеты по деньгамТЗ на доработку сайта
Что проверяем
Что входит в аудитТехнические ошибкиКонтент и семантикаСкорость и Core Web Vitals
Экосистема
ИнструментыОпределить CMSГенератор UTMИнтеграцииGEO / ИИ-поиск
Решения
По роли
Владельцам бизнесаSEO-специалистамАгентствам
По нише
Все нишиИнтернет-магазиныУслуги и локальный бизнесМедицина и клиники
По движку
Все CMSWordPress1С-БитриксTilda
Тарифы
Сравнение
SEOSCANUM и другие
Все сравненияScreaming Frog и краулерыAhrefs и SemrushКогда выбирать SEOSCANUM
База знаний
Блог
Все статьиЧто такое SEO-аудитАудит своими рукамиCore Web Vitals
Справочник
Глоссарий SEOЧастые вопросы
Компания
О сервисе
О насКонтактыПригласить друга
Документы
Публичная офертаПолитика конфиденциальностиВсе документы
Бесплатный инструмент

Проверка сигналов индексации URL

Покажем, не закрыта ли страница от индекса тегами и robots.txt. В выдачу Google и Яндекса мы не подглядываем.

Как пользоваться

  1. 1Вставьте точный URL, который проверяете.
  2. 2Смотрим meta robots, заголовок X-Robots-Tag и каноникал.
  3. 3Сверяем путь с Disallow в /robots.txt.
  4. 4Факт «в индексе / не в индексе» смотрите в Search Console или Вебмастере.

Почему нельзя честно сказать «URL в индексе»

Индекс Google и Яндекса — закрытые системы. Сервисы, которые рисуют зелёную галочку без вашего кабинета, либо гадают, либо нарушают правила. SEOSCANUM так не делает: мы читаем сигналы на самой странице и в robots.txt.

noindex, X-Robots-Tag: noindex, каноникал на другой URL и Disallow пути — частые причины, почему страница не появляется в поиске. Если сигналов запрета нет, это не гарантия индекса: робот мог не дойти, увидеть дубль или отбросить тонкий контент.

Какие сигналы собираем

HTML meta robots. Заголовок X-Robots-Tag. Canonical. Совпадение пути с правилами User-agent: * в robots.txt. Код ответа и финальный URL после редиректа. Всё это факты ответа сервера.

Не показываем выдуманный «трафик» и не подставляем позицию. Для факта индекса подключите Search Console и Яндекс.Вебмастер в аудите — тогда отчёт строится на выгрузке, не на догадке.

Что чаще всего закрывает URL

Шаблон noindex на пагинации и фильтрах, который задели и карточки. Служебный параметр в Disallow, который совпадает с ЧПУ. Каноникал на главную у всего блога. Ответ 200 на удалённую страницу без noindex — soft 404, его ловит проверка 404.

Закрытый в robots.txt URL иногда всё равно виден в выдаче по внешней ссылке, но без сниппета. Сначала снимите запрет, потом запрашивайте переобход в кабинете.

Как пользоваться вместе с аудитом

Точечная страница — чтобы проверить один конфликт перед релизом. Массовые noindex и расхождения с картой сайта видны в техническом аудите SEOSCANUM.

Инструмент открытый, без регистрации. Не обещаем «добавить в индекс за 24 часа» — такого переключателя нет ни у кого честно.

Частые вопросы

Вы проверяете индекс Google?
Нет. Только сигналы на странице и в robots.txt. Индекс — в кабинетах вебмастера.
noindex в robots.txt?
В robots.txt нет noindex. Там Disallow. noindex — в HTML или HTTP-заголовке.
Canonical мешает индексу?
Если он указывает на другой URL, робот скорее склеит страницы. Это не баг, если так задумано.
Почему страница открывается, а в поиске нет?
Робот не дошёл, увидел дубль, тонкий текст или вы сами закрыли индекс. Эта проверка ловит только закрытие.
Нужна регистрация?
Нет.

Ещё на сайте

Проверка robots.txt

Откроем /robots.txt сайта, разберём директивы User-agent: * и покажем, не закрыт ли весь сайт. Регистрация не нужна.

Тестер пути в robots.txt

Заберём robots.txt и применим правила User-agent: * к вашему пути. Как в спецификации: длинное совпадение сильнее.

Проверка метатегов

Считаем title, description, canonical и meta robots с живой страницы. Не подставляем «идеальную длину из головы».

Ответ сайта Googlebot

Два запроса к одному URL: наш UA и публичный UA Googlebot. Сравниваем статус, финал редиректа и размер HTML.

Определить CMS

Движок по HTML и заголовкам.

Генератор UTM

Собрать метки для рекламы.

Проверьте свой сайт за пару минут

Запустите бесплатное демо-аудита — увидите главные проблемы без оплаты и без подписки.

Платный аудит — от 99 ₽ за запуск. Все тарифы