Проверка директив noindex и nofollow мета-тега Robots

Опубликовано: 15.08.2018. Обновлено: 19.08.2019 514 0

Цель проверки — убедится, что при помощи директив noindex и nofollow мета-тега robots не закрыт полезный контент сайта.

Сканируем сайт Компарсером и смотрим в правой колонке ветку мета-тега роботс:

noindex — означает не индексировать контент страницы;

nofollow— не переходить по ссылкам на странице;

noindex, follow — не индексировать контент, но переходить по ссылкам. Такая комбинация обычно делается для страниц категорий, которые не являются посадочными страницами:

и пагинации:

На текущий момент корректное решение для страниц пагинации — прописывать тег canonical, указывая в качестве канонического адреса первую страницу. Например, на страницах пагинации:

сайт.рф/ромашки/2
сайт.рф/ромашки/3

должен быть прописан канонический адрес первой страницы

сайт.рф/ромашки/

Подробнее: https://yandex.ru/blog/platon/2878