Начать новую тему

Страницы с мета-тегом noindex и robots.txt

Добрый день! На сайте есть страницы вида https://www.aziks.ru/uniseks/noski-uniseks/noski-uniseks/?features_hash=60-2484


Сейчас их около 280. Эти страницы закрыты Мерчиумом от индексации с помощью мета-тега noindex.


Вопрос: нужно ли эти страницы закрыть в файле robots.txt?


Спасибо!

Здравствуйте.


Нет, данные страницы не надо запрещать в файле robotx.txt, так как они скрыты от индексации с помощью значения nofollow.


Спасибо.

Страницы с noindex это только для Яндекса, остальные поисковики этот тэг игнорируют.

 

Поэтому есть мнение, что нужно закрывать в robots.txt страницы с noindex.

Здесь http://forum.cs-cart.com/topic/34346-features-hashv215v6293v197/ предлагают блокировать доступ в robots.txt 

Пожалуйста, предоставьте документацию, в которой указано, что тег nofollow игнорируется поисковыми системами.

Спасибо.

 


Войдите, чтобы опубликовать свой комментарий