Правка модуля robotstxt
23 февраля 2019 в 18:49
Здраствуйте
Возможно ли поправить модуль новичку вот - https://www.drupal.org/project/robotstxt
что-бы выводилось поле Host: Адрес сайта с какого открит robots txt
На данный момент откриваеться только
Sitemap: http://Адрес сайта/sitemap.xml домен автоматически подставляеться под сайт
Спасибо!
Go to accepted answer
- Блог
- Войдите или зарегистрируйтесь, чтобы отправлять комментарии
Комментарии
Я не понял, зачем править модуль. Объясните.
У меня много алиасов 1 сайта, хочу что-бы их при возможности поисковики не склеивали
Для этого нужно вывести поле Host: Домен
Куда вывести? В файл robots.txt?
Сам посмотри http://vkwebsite.ru/robots.txt
И сравни алиас - http://plu-pro.ru/robots.txt Только не хватает поля HOST:
Тоже самое только домен поменялься
Настраиваеться модуль через админку - https://www.drupal.org/project/robotstxt
В директиве host уже нет необходимости в файле robots.txt:
https://webmaster.yandex.ru/blog/301-y-redirekt-polnostyu-zamenil-direkt...
https://webmaster.yandex.ru/blog/301-redirekt-zamenit-direktivu-host-pri...
все решается корректными 301 редиректами.
На будущее, если кому-нибудь понадобится еще что-нибудь добавить в robots.txt:
hook_robotstxt()