2 сентября 2017 в 18:58
Содержимое сайта публикуется на условиях CreativeCommons Attribution-ShareAlike 3.0 или более поздней версии. Программные коды в тексте статей — на условиях GNU GPL v2 или более поздней версии.
Документация по совместной работе с репозиторием drupal.ru – https://docs.drupal.ru/code
Drupal – торговая марка Дриса Бёйтарта
12+
Поддерживать инфраструктуру Drupal.ru нам помогает компания ДАЛЕЕ
Комментарии
Disallow: /news/one нет ?
да, для конкретного материала one но их там много после news идет разных материалов, любые надо статьи после news заблокировать от индексации
Bumble, спасибо за лаконичное решение моего вопроса.
Disallow: /news/*И рекомендую модуль https://www.drupal.org/project/custom_robots , чтобы при обновлении ядра у вас не слетели эти настройки.
chmod 444 robots.txt
правда изменения при обновлении ядра не попадут в файл.
Disallow: /news/*
Проверить можно по урл https://webmaster.yandex.ru/tools/robotstxt/