Как правильно запретить индексацию?

60

GlobalSeoLab

14 января 2015, 10:37

372

Заметил недавно, что в гугле в индексе есть страницы входа в профиль человека. Типа такого:

site.ru/user/27/

А там просто форма ввода логина и пароля.

Вопросы такие.

1. Надо ли запрещать индексирование таких страниц? Или можно оставить без проблем в будущем?

2. Если надо, то как?

306

Zegeberg

14 января 2015, 10:40

#1

Закройте через Disallow, особых проблем быть не должно, но и лишний мусор зачем сайту.

Ссылки с форумов, блогов и соц сетей ( https://forumok.com/p/c1710b6b/ ) Создание, настройка и ведение РК Директ

167

xmylov

14 января 2015, 10:41

#2

Disallow: *user*

Мобильные прокси беру тут: https://ok.me/T0dF1

60

GlobalSeoLab

14 января 2015, 20:43

#3

Правильно я понял, что это надо прописать в robots.txt? И как именно прописать, если у меня много страниц под каждого юзера, по типу:

site.ru/user/27/

site.ru/user/28/

site.ru/user/29/

site.ru/user/30/

и т.д.

266

WebAlt

14 января 2015, 23:49

#4

Правильно понимаете, в robots.txt. Перечислять всё не нужно, просто:

User-agent: *
Disallow: /user/