Можно ли закрыть в роботс http://www.site.ru/ ?

K
На сайте с 30.07.2008
Offline
135
624

Оп-па, увидел, что у меня в индексе есть и http://www.site.ru и http://www.site.ru/

И он как раз просел. Надо бы закрыть, по идее, один вариант. А страшно - это же должно быть одно и то же! Кто-то пробовал? Нормально? Или лучше подождать, когда само склеится?

P.S. Есть ли возможность сделать это через 301 редирект?

Спасибо.

M5
На сайте с 12.08.2009
Offline
221
M25
#1

Если речь о Яндексе, то достаточно в robots.txt прописать нужный хост

► Рейтинг серверов — ТОП10 ◄
onigbinde
На сайте с 20.11.2008
Offline
138
#2
kirf:
Оп-па, увидел, что у меня в индексе есть и http://www.site.ru и http://www.site.ru/
Спасибо.

Не понял в чем отличие?.. У вас наверное две главных с www и без? Тода вам сюда

K
На сайте с 30.07.2008
Offline
135
#3

С www и без www - во-первых, классика, во-вторых, даже в цитате моего вопроса видно, что речь об адресе со слешем и без слеша. Наверное, надо было так и написать.

Вот про хост, как выясняется, актуально, потому что роботс писался так давно, что сейчас заглянул и поразился: сначала указан хост (правильно, с ввв), потом идут запрещенные к индексации страницы. То есть не по стандарту. Исправил, жду.

S
На сайте с 28.10.2005
Offline
311
#4

Насколько мне позволяют мои скудные познания смелюсь заметить:

"/" - путь на сервере - корень

Что надо слать в GET запросе чтоб открыть без слеша? Пустоту?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий