25 февраля 2011 в 17:01
Как в robots.txt запретить индексацию страниц такого вида taxonomy/term/49/0
robots.txt
Главные вкладки
25 февраля 2011 в 17:01
Содержимое сайта публикуется на условиях CreativeCommons Attribution-ShareAlike 3.0 или более поздней версии. Программные коды в тексте статей — на условиях GNU GPL v2 или более поздней версии.
Документация по совместной работе с репозиторием drupal.ru – https://docs.drupal.ru/code
Drupal – торговая марка Дриса Бёйтарта
12+
Комментарии
http://www.robotstxt.org/
добавить Disallow: /taxonomy/term/49/0
если надо, что бы индексировалось taxonomy/term/49 но не taxonomy/term/49/0 надо поставить модуль globalredirect
Спасибо за советы.
Модуль globalredirect включен, но индексируется не taxonomy/term/49, а taxonomy/term/49/0.
Если надо убрать все страницы типа taxonomy/term/1/0,taxonomy/term/2/0,taxonomy/term/49/0 и т.д.то надо прописать Disallow: /taxonomy/term/ или перечислять все?
тыц
Зайдите в яндекс-вебмастер, там можно с роботс поиграться, все сразу понятно станет
http://webmaster.yandex.ru/robots.xml
http://help.yandex.ru/webmaster/?id=996567 справка по составлению