Нужно ли запрещать страницы пользователей в robots.txt?

Аватар пользователя kovalevm kovalevm 20 мая в 9:46

Нужно ли запрещать страницы пользователей в robots.txt? На сайте более 15 тысяч пользователей, страницы пользователей сейчас индексируются.

0 Thanks

Комментарии

Аватар пользователя VasyOK VasyOK 20 мая в 10:49
1

Индексироваться может только то, что видно анонимам (иначе мне звезда). Если считаете, что НЕ нужно, подумайте почему страницы пользователей вообще видны (разрешения для ролей).

Аватар пользователя sas@drupal.org sas@drupal.org 20 мая в 11:10
1

Все немного проще - доступ к пользователям на просмотр настраивается в правах через админку, и намного реже их открывают в админке, но запрещают в роботе, тем более что он не предназначен для того, чтобы запрещать показ веб-страниц в результатах поиска такого же гугля.

Аватар пользователя Semantics Semantics 20 мая в 11:49
2

Принимать решение запрещать или не запрещать вы должны сами, отталкиваясь от специфики проекта.
Если у вас интернет-магазин, то запрещать, и вообще, почему они доступны для индексации?
Если у вас соцсеть, то вероятно, этого делать не стоит.