Проверка noindex, nofollow на всём сайте

Опубликовано: 14.04.2018. Обновлено: 18.10.2019 1 471 0

Полезный контент может быть закрыт тегом noindex по ошибке, например, вебмастер забыл поставить закрывающий тег. Теги nofollow могут быть поставлены также по ошибке на внутренние ссылки сайта.

Поиск noindex на всём сайте

Контент может оказаться внутри тегов

Для проверки в Компарсере перед началом сканирования нажимаем кнопку "Поиск кода" и в открывшемся окне забиваем "noindex":

После этого с обычными настройками сканируем сайт:

Затем в верхней панели выбираем "Экспорт" — "Экспорт данных краулера". В результатах экспорта крайняя правая колонка:

Если фрагмент noindex обнаружен на странице, то в колонке — значение "1". Если фрагмента нет — "0".

Поиск nofollow на всём сайте

Аналогичным образом нужно проверить наличие атрибута nofollow в ссылках. Как поступать, если обнаружен:

• во внутренней перелинковке — удаляем.
• в исходящих ссылках — оставляем.