Запретить поисковикам индексировать внтуренние страницы

Главные вкладки

Аватар пользователя boroda2014 boroda2014 29 сентября 2019 в 20:23

Всем привет. Поисковики, в особенности Яндекс, постоянно индексируют внтуренние и технические страницы модуля Quicktabs

https://site.com/?author=1&page=21
https://site.com/?page=97
https://site.com/gpunion?qt-curr=3
https://site.com/?field_protokol_tid=All&field_protokol_tid_1=All&field_...
https://site.com_tabs=0
https://site.com_tabs=3
https://site.com_tabs=2
https://site.com/_tabs=3

Можно как-то в .htacess или robots запретить поисковикам обходить эти страницы.
Есть ли у кого готовый пример для Друпал7 с токенами, вида [page] [user] [author] [_tabs]

Если я запрещу в роботс
Disallow: ?qt-
То это запретит обход с конструкцией ?qt-? Например https://site.com/?qt-название табов

Disallow: ?field_запретит обход страниц фильтра?

Комментарии

Аватар пользователя pselfin pselfin 30 сентября 2019 в 11:22

А еще посмотрите про метатег canonical

Disallow: ?qt-
То это запретит обход с конструкцией ?qt-? Например https://site.com/?qt-название табов

Disallow: ?field_запретит обход страниц фильтра?

Если не только для главной

Disallow: *?qt-
Disallow: *?field_